Lihat hasil evaluasi untuk agen (pratinjau)

[Artikel ini adalah dokumentasi prarilis dan dapat berubah.]

Setelah Anda melakukan evaluasi, tinjau hasilnya untuk melihat seberapa baik agen Anda berkinerja di berbagai percakapan. Hasilnya menunjukkan skor kualitas dan memungkinkan Anda membuka percakapan individual untuk melihat respons agen.

Important

Melihat hasil pelaksanaan

Untuk melihat hasil lari:

  1. Buka agen Anda di Copilot Studio.
  2. pilih tab Evaluasi.
  3. Di bawah hasil terbaru, pilih evaluasi dengan uji coba sebelumnya untuk melihat hasilnya.

Hasilnya menampilkan informasi berikut:

  • Hasil uji coba: Tabel yang menampilkan setiap percakapan dengan jumlah pesan antara pengguna dan agen, serta skor kualitas umum. Pilih percakapan untuk melihat detail lebih lanjut.

  • Ringkasan evaluasi: Ringkasan evaluasi keseluruhan Anda di semua metode uji. Ini mencakup informasi sebagai berikut:

    • Skor: Keseluruhan skor percakapan yang lulus metode uji kualitas umum.
    • Durasi: Waktu yang diperlukan untuk menyelesaikan evaluasi.
    • Kasus uji: Jumlah kasus uji dalam evaluasi keseluruhan Anda.
    • Jenis data: Jenis test set. Hanya tipe data Percakapan yang tersedia.
    • Profil pengguna: Profil pengguna yang menjalankan evaluasi.

Tinjau kasus uji

Untuk meninjau kasus uji:

  1. Pada halaman hasil eksekusi, pilih percakapan untuk menampilkan detailnya.

  2. Tinjau Rincian kasus uji:

    • Pesan pengguna: Pesan uji yang dikirim ke agen.
    • Respons agen: Respons sebenarnya dari agen.
    • Kualitas umum: Bagaimana skor jawaban pada metode tes, baik Lulus atau Gagal.

    Gunakan informasi ini untuk mengidentifikasi bagian yang perlu ditingkatkan pada agen Anda.

Membandingkan eksekusi

Jalankan evaluasi yang sama beberapa kali untuk membandingkan hasil dan melacak kemajuan:

  1. Pada halaman detail evaluasi, tinjau daftar eksekusi beserta skor dan stempel waktunya.
  2. Bandingkan skor antar run untuk melihat apakah agen Anda mengubah peningkatan atau penurunan kinerja.
  3. Cari pola. Misalnya, jika suatu kategori percakapan secara konsisten mendapat skor rendah, area tersebut mungkin membutuhkan lebih banyak instruksi atau pengetahuan.

Ekspor hasil

Hasil evaluasi ekspor untuk analisis lebih lanjut:

  1. Pada halaman hasil eksekusi, pilih ikon tiga titik (…) >Ekspor hasil pengujian. Anda juga dapat memilih evaluasi tertentu, lalu memilih tiga titik (...) >Hasil uji ekspor di pojok kanan atas.
  2. Unduh hasilnya dalam format CSV yang mencakup semua percakapan, respons, dan skor.

Menindaklanjuti hasil

Berdasarkan hasil evaluasi Anda:

  • Last updated on