Mengubah detail dari set pengujian

Note

Fitur dalam artikel ini didukung oleh harness standar yang menggunakan opsi penagihan yang dijelaskan dalam Lisensi untuk agen yang didukung oleh harness standar. Pelajari cara mengakses fitur standar di agen standar Access dan alur agen.

Gunakan set pengujian untuk mengevaluasi dan menyempurnakan cara agen Anda menangani skenario respons dunia nyata. Artikel ini menjelaskan cara mengubah nama dan setelan set pengujian, mengelola profil pengguna dan koneksi yang digunakan untuk autentikasi, mengedit atau menghapus kasus pengujian individual, dan menghapus seluruh set atau hasil pengujian. Langkah-langkah ini membantu Anda memastikan evaluasi mencerminkan konteks pengguna yang tepat dan mempertahankan akses aman ke sumber pengetahuan dan alat.

Anda memiliki pilihan tiga metode pengujian, juga disebut sebagai penilai, untuk mengevaluasi respons agen: kualitas, kesamaan, dan pencocokan teks. Untuk informasi selengkapnya tentang berbagai metode pengujian, lihat Metode pengujian.

Edit detail untuk test set

Anda dapat mengubah detail set pengujian, seperti akun mana yang digunakan untuk autentikasi dan metode pengujian yang digunakan.

1. Pergi ke halaman Evaluasi agen Anda.

   

2. Pilih set pengujian.

3. Di test set, pilih kasus pengujian yang ingin Anda edit.

4. Secara opsional, ubah nama set pengujian.

5. Tambahkan atau ubah metode pengujian. Setiap metode pengujian mengukur nilai yang berbeda, dan memerlukan konfigurasi yang berbeda. Untuk mempelajari cara menyiapkan setiap metode pengujian, lihat Memilih metode pengujian.

   Metode pengujian	Tindakan	Jenis test set	Penilaian	Konfigurasi
   Kualitas umum	Seberapa baik respons dari suatu kasus pengujian berdasarkan kriteria kualitas tertentu.	Tanggapan atau percakapan tunggal	Dinilai dari 100%	None
   Bandingkan makna	Seberapa baik arti jawaban kasus uji sesuai dengan jawaban yang diharapkan	Respons tunggal	Dinilai dari 100%	Skor lulus, jawaban yang diharapkan
   Penggunaan alat	Apakah kasus pengujian menggunakan semua atau sebagian dari sumber daya yang diharapkan	Respons tunggal	Lulus/gagal	Kemampuan yang diharapkan
   Pencocokan kata kunci	Apakah kasus pengujian menggunakan semua atau salah satu kata kunci atau frasa yang diharapkan	Tanggapan atau percakapan tunggal	Lulus/gagal	Kata kunci atau frasa yang diharapkan
   Kesamaan teks	Seberapa baik teks jawaban kasus uji cocok dengan jawaban yang diharapkan	Respons tunggal	Dinilai dari 100%	Skor lulus, jawaban yang diharapkan
   Kecocokan persis	Apakah jawaban kasus uji sama persis dengan jawaban yang diharapkan	Respons tunggal	Lulus/gagal	Jawaban yang diharapkan
   Custom	Apakah respons kasus pengujian memenuhi kriteria atau ekspektasi yang Anda tentukan.	Tanggapan atau percakapan tunggal	Lulus/gagal (melewati kriteria label yang ditentukan)	Nama, instruksi evaluasi, label

6. Pilih Kelola profil untuk menambahkan akun, atau pilih profil saat ini untuk mengelola koneksi atau memilih profil lain. Pengujian otomatis menggunakan autentikasi akun pengujian yang dipilih. Pelajari lebih lanjut di Kelola profil pengguna dan koneksi.

Note

Saat Copilot Studio menghasilkan kasus pengujian atau menjalankan evaluasi, ia menggunakan kredensial autentikasi akun yang terhubung untuk mengakses sumber pengetahuan dan alat agen Anda. Kasus pengujian yang dihasilkan dapat menyertakan data sensitif yang dapat diakses akun yang terhubung. Setiap pembuat dengan akses ke agen juga dapat melihat set pengujian yang ditautkan ke agen tersebut.

Kelola profil pengguna dan koneksi (pratinjau)

[Bagian ini adalah dokumentasi prarilis dan dapat berubah sewaktu-waktu.]

Anda dapat menjalankan set uji dengan menggunakan autentikasi akun yang berbeda dari milik Anda. Metode autentikasi ini memungkinkan agen Anda mengakses sumber pengetahuan dan alat yang diperlukan untuk menyelesaikan tujuannya.

Anda dapat menggunakan profil untuk mensimulasikan pengalaman pengguna tertentu. Misalnya, profil pengguna direktur dapat mengakses sumber pengetahuan yang berbeda dari profil pengguna magang, dan agen mengembalikan hasil yang berbeda.

Important

Artikel ini berisi dokumentasi pratinjau Microsoft Copilot Studio dan dapat berubah.

Fitur pratinjau tidak dimaksudkan untuk penggunaan produksi dan mungkin memiliki fungsionalitas terbatas. Fitur ini tersedia sebelum rilis resmi agar Anda bisa memperoleh akses awal dan memberikan tanggapan.

Jika Anda membangun agen yang siap untuk produksi, silakan lihat Gambaran Umum Microsoft Copilot Studio.

Important

Saat Anda memilih profil pengguna, Anda dapat meninjau dan mengautentikasi konektor apa pun yang digunakan agen Anda. Jika Anda memilih akun selain yang Anda gunakan untuk masuk ke Copilot Studio, seperti akun uji coba, Copilot Studio mengautentikasi profil pengguna tersebut dan mengambil koneksi pengguna yang sudah ada. Anda dapat mengonfigurasi, meninjau, dan menyimpan koneksi ini sebelum menjalankan evaluasi.

Hasil pengujian menunjukkan profil pengguna mana yang digunakan.

Note

Saat Copilot Studio menghasilkan kasus pengujian atau menjalankan evaluasi, ia menggunakan kredensial autentikasi akun yang terhubung untuk mengakses sumber pengetahuan dan alat agen Anda. Kasus pengujian yang dihasilkan dapat menyertakan data sensitif yang dapat diakses akun yang terhubung. Setiap pembuat dengan akses ke agen juga dapat melihat set pengujian yang ditautkan ke agen tersebut.

Evaluasi agen yang menggunakan autentikasi pengguna memerlukan akses melalui konektor Microsoft Copilot Studio. Jika admin menonaktifkan koneksi ini, Anda tidak dapat menjalankan pengujian dengan menggunakan alat evaluasi. Untuk informasi selengkapnya, lihat konektor dan grup data Copilot Studio.

Untuk menambahkan atau mengubah profil pengguna dalam set pengujian:

1. Buka set pengujian, lalu pilih Kelola profil.

   

2. Pilih dropdown Pengguna, lalu:

   • Pilih akun pengguna yang ingin Anda gunakan, atau
   • Pilih Tambahkan akun, lalu masuk ke akun.

   

3. Untuk koneksi dengan peringatan, pilih koneksi tersebut. Ubah koneksi yang ada ke koneksi yang berfungsi, pilih Sambungkan kembali untuk mencoba membangun kembali koneksi yang ada, atau pilih Buat koneksi baru untuk mencoba koneksi baru. Koneksi yang berfungsi ditandai dengan centang hijau.

4. Untuk koneksi baru, masukkan detail koneksi yang diminta, lalu pilih Hubungkan.

5. Saat semua koneksi berfungsi, pilih Simpan.

6. Setelah pop-up Manage profile and connections hilang, pilih Simpan untuk memperbarui set pengujian dengan profil pengguna dan koneksi yang dipilih.

Menghapus rangkaian uji atau hasil pengujian

Anda dapat menghapus kasus pengujian atau set pengujian yang tidak lagi Anda perlukan.

1. Pergi ke halaman Evaluasi agen Anda.
2. Di bagian Set pengujian , hapus set pengujian dengan melakukan salah satu langkah berikut:
   • Pilih tiga titik (...) pada kartu set pengujian, lalu pilih Hapus.
   • Pilih set pengujian untuk membukanya, lalu pilih tiga titik (...) di panel Konfigurasikan set pengujian , lalu pilih Hapus.
3. Di bagian Hasil terbaru , hapus hasil pengujian dengan melakukan salah satu langkah berikut:
   • Arahkan kursor ke hasil pengujian yang ingin Anda hapus, pilih tiga titik (...) lalu pilih Hapus pengujian.
   • Pilih hasil pengujian untuk membukanya, lalu pilih tiga titik (...) di panel Ringkasan evaluasi , lalu pilih Hapus.