Buat set pengujian untuk agen (pratinjau)

[Artikel ini adalah dokumentasi prarilis dan dapat berubah.]

Set uji adalah kumpulan percakapan yang Anda gunakan untuk mengevaluasi kinerja agen Anda. Setiap percakapan mewakili skenario yang harus ditangani agen Anda.

Important

Prasyarat

Agen dibuat dan disimpan menggunakan harness GitHub Copilot. Lihat Buat agen (pratinjau).

Mulai evaluasi baru

Untuk memulai evaluasi baru:

  1. Buka agen Anda di Copilot Studio.
  2. pilih tab Evaluasi.
  3. Pilih Evaluasi baru.

Pilih dari salah satu opsi ini:

Opsi 1: Unggah percakapan dari file CSV

  1. Pada tab Evaluasi, di bagian Sumber data, seret file CSV ke area unggahan atau pilih file tersebut untuk menelusuri file.

    Tip

    Pilih tautan CSV untuk mengunduh templat dengan format file yang benar. Ukuran file maksimum adalah 5 MB.

  2. Tinjau percakapan yang diimpor dan sesuaikan sesuai kebutuhan.

  3. Di panel Konfigurasikan test set di sebelah kanan, masukkan Nama untuk evaluasi.

  4. Pilih Evaluasi untuk menjalankan evaluasi, atau pilih Simpan untuk menyimpannya tanpa menjalankan.

Opsi 2: Hasilkan percakapan dengan AI

  1. Pada tab Evaluasi, di bagian Cara memulai lainnya, pilih Kumpulan percakapan cepat.
  2. Tunggu sementara sistem menghasilkan 10 percakapan berdasarkan deskripsi, instruksi, dan topik agen.
  3. Tinjau percakapan yang dihasilkan dalam daftar Tinjau kasus uji Anda.
  4. Di panel Konfigurasi set uji , masukkan Nama, lalu pilih Evaluasi atau Simpan.

Anda juga dapat menghasilkan lebih banyak percakapan dari tampilan evaluasi. Pilih Tambah percakapan>Buat 10 percakapan. Setelah Anda menjalankan evaluasi awal, pilih Tambah percakapan>Buat 25 percakapan atau Buat 50 percakapan untuk menghasilkan lebih banyak.

Opsi 3: Tulis percakapan secara manual

  1. Pada tab Evaluasi, di bagian Lebih banyak cara untuk memulai, pilih Atau, tulis beberapa pertanyaan sendiri.
  2. Di daftar Tinjau kasus uji Anda , pilih Tambahkan percakapan>Tulis untuk membuat kasus uji secara manual.
  3. Tambahkan pertanyaan pengguna untuk setiap percakapan. Opsional, tambahkan respons agen yang diharapkan.
  4. Pada panel Konfigurasikan test set, masukkan Nama dan pilih Evaluasi atau Simpan.

Konfigurasikan test set

Saat Anda membuat atau mengedit evaluasi, panel Konfigurasi set uji mencakup opsi berikut:

  • Nama: Nama yang wajib untuk evaluasi.
  • Metode tes: Metode yang memberi skor respons. Pemeriksaan kualitas umum apakah respons memenuhi standar kualitas seperti relevansi dan kelengkapan.
  • Profil pengguna: Profil terautentikasi yang menjalankan evaluasi. Pilih Kelola untuk mengatur profil mana yang menjalankan pengujian.

Sunting percakapan dalam set pengujian

Untuk mengedit percakapan dalam set uji:

  1. Pada tab Evaluasi, buka test set yang ada dari dropdown Evaluasi.
  2. Pilih percakapan untuk mengedit pesannya.
  3. Gunakan dropdown Tambahkan percakapan untuk menambah percakapan.
  4. Pilih Simpan saat Anda selesai.
  • Last updated on