Lewati ke konten

Mengevaluasi Agent

Evaluasi tingkat tugas, analisis lintasan, dan metrik keandalan dan biaya.

Tingkat
Menengah
Pelajaran
3
Total waktu
46 min
Simulasi
3
Termasuk di Membangun AI Agent: Harness Engineering · $9
Tools yang dipakai
  • Python
  • Claude
  • OpenAI
  • FastAPI
Keterampilan
  • Evaluasi tugas
  • Analisis lintasan

Yang akan Anda bisa

  • Mengukur tingkat keberhasilan agent pada tugas nyata
  • Menemukan langkah tempat agent gagal

Sebelum mulai

Hanya saran, tidak pernah mengunci — Anda bisa mulai di sini.

  • harness-engineering
Modul yang membantu lebih dulu

Silabus

3 pelajaran · 46 min

Judul dan ringkasan setiap pelajaran terbuka untuk umum. Isi pelajarannya terbuka setelah Anda memiliki jalurnya.

Semua pelajaran di Membangun AI Agent: Harness Engineering
  1. Evaluasi Tingkat Tugas

    18 min

    Menilai hasil akhirnya, bukan setiap kata — dan membuat lingkungan uji yang bisa diulang.

    Termasuk dalam jalurnya Simulasi
  2. Membaca Lintasan Agent

    14 min

    Menelusuri log langkah demi langkah untuk menemukan kesalahan pertama.

    Termasuk dalam jalurnya Simulasi
  3. Metrik Biaya dan Keandalan

    14 min

    Biaya per tugas, jumlah langkah, dan variasi antar-percobaan.

    Termasuk dalam jalurnya Simulasi
Akses seumur hidup
$9
Beli jalurnya
Lainnya di Membangun AI Agent: Harness Engineering
Modul · Menengah

Dasar-Dasar AI Agent

Apa itu agent, apa itu harness, dan kapan sebuah masalah memang butuh agent — dan kapan tidak.

  • 4 pelajaran
  • 1j 13m
  • 4 simulasi
Termasuk di Membangun AI Agent: Harness Engineering· $9
Modul · Menengah

Harness Engineering

Konteks, izin, sandbox, error, dan tracing — semua yang membuat agent bisa dipercaya di luar demo.

  • 4 pelajaran
  • 1j 2m
  • 5 simulasi
Termasuk di Membangun AI Agent: Harness Engineering· $9
Modul · Menengah

Alat dan Model Context Protocol

Menghubungkan agent ke API, database, dan file — dengan MCP sebagai antarmuka standar.

  • 3 pelajaran
  • 50 min
  • 2 simulasi
Termasuk di Membangun AI Agent: Harness Engineering· $9
Modul · Menengah

Sistem Multi-Agent

Orchestrator dan worker, subagent, dan isolasi konteks — kapan membagi pekerjaan membantu, dan kapan merugikan.

  • 3 pelajaran
  • 42 min
  • 3 simulasi
Termasuk di Membangun AI Agent: Harness Engineering· $9