Metrik dan rekomendasi untuk Copilot Studio

Metrik kesehatan operasional Copilot Studio tersedia di pusat admin Power Platform.

Lihat metrik Copilot Studio

1. Masuk ke pusat admin Power Platform.

2. Di panel navigasi, pilih Pantau.

3. Di panel Monitor , di bawah Produk, pilih Copilot Studio.

   Halaman Copilot Studio menampilkan metrik untuk agen percakapan dan otonom yang dibuat di Copilot Studio. Untuk agen yang menggunakan GitHub Copilot, Copilot Studio menggunakan AI untuk meninjau setiap sesi yang selesai dan menetapkannya satu hasil, seperti diselesaikan, dieskalasi, atau ditinggalkan. Monitor kemudian menggunakan hasil tersebut untuk memutuskan apakah sesi dihitung sebagai keberhasilan atau kegagalan. Analisis AI berjalan setelah sesi berakhir, sehingga metrik untuk agen ini dapat muncul di Monitor hingga 48 jam setelah penggunaan.

Metrik dan rekomendasi Copilot Studio

Definisi metrik

Tipe	Metrik	Definition	Support
Agents	Tingkat keberhasilan sesi agen	Persentase yang menjelaskan seberapa sering agen otonom berhasil menjalankan tugasnya, atau seberapa sering sesi agen percakapan berhasil diselesaikan.	Tersedia secara umum
Agents	Sesi agen terbaru	Jumlah sesi pengguna yang berbeda di dalam satu agen dalam satu hari. Sesi dimulai ketika pengguna membuka agen dan berakhir setelah periode tidak aktif atau ketika agen ditutup.	Tersedia secara umum

Pemetaan hasil sesi

Tabel berikut ini memperlihatkan bagaimana Monitor menghitung setiap hasil sesi untuk agen yang menggunakan GitHub Copilot.

Hasil sesi	Apa artinya	Tingkat keberhasilan sesi agen	Sesi agen terbaru
Diselesaikan – dikonfirmasi	Pengguna mengonfirmasi bahwa kebutuhan mereka terpenuhi.	✅ Berhasil	Dihitung
Terselesaikan – tersirat	Kebutuhan pengguna tampaknya terpenuhi, meskipun pengguna tidak secara eksplisit mengonfirmasinya.	✅ Berhasil	Dihitung
Ditingkatkan – dimaksudkan oleh sistem	Agen menyerahkan sesi karena aturan eskalasi yang dikonfigurasi pembuat bot. Agen melakukan apa yang memang dirancang untuk dilakukannya.	✅ Berhasil	Dihitung
Dieskalasikan – pengguna meminta	Pengguna meminta untuk berbicara dengan seseorang.	❌ Kegagalan	Dihitung
Dieskalasikan – oleh sistem secara tidak sengaja	Sesi dieskalasikan karena agen, atau alat atau alur yang dipanggilnya, gagal.	❌ Kegagalan	Dihitung
Belum terselesaikan – kegagalan agen	Agen mengatakan bahwa ia tidak dapat membantu dengan permintaan tersebut.	❌ Kegagalan	Dihitung
Belum terselesaikan – pengguna menolak	Pengguna menolak jawaban agen.	❌ Kegagalan	Dihitung
Belum terselesaikan – tidak lengkap	Sesi berakhir dengan kebutuhan pengguna masih terbuka.	❌ Kegagalan	Dihitung
Ditinggalkan	Pengguna berhenti merespons sebelum sesi berakhir.	❌ Kegagalan	Dihitung
Tidak terlibat	Pengguna tidak pernah mengirim pesan ke agen, jadi tidak ada status akhir.	Dikecualikan	Tidak dihitung
Tidak dianalisis	Tidak ada status yang dapat ditentukan. Misalnya, sesi terlalu besar untuk dianalisis, sesi dilewati karena batas kapasitas analisis, atau analisis tidak mengembalikan hasil yang valid.	Dikecualikan	Tidak dihitung

Bagaimana tingkat keberhasilan dihitung

Monitor menghitung tingkat keberhasilan hanya dari sesi yang memiliki hasil:

Tingkat keberhasilan sesi agen = sesi yang berhasil ÷ (sesi yang berhasil + sesi yang gagal)

Note

• Setiap sesi dihitung sekali.
• Pemetaan ini berlaku untuk sesi percakapan untuk agen yang menggunakan GitHub Copilot. Agen otonom terus melaporkan keberhasilan berdasarkan apakah setiap eksekusi menyelesaikan tugasnya.

Tips untuk meningkatkan tingkat keberhasilan Anda

• Banyak hasil "Tidak Terselesaikan" atau "Dieskalasikan - diminta pengguna": Periksa apakah agen memiliki sumber pengetahuan dan instruksi yang diperlukan untuk menjawab pertanyaan umum.
• Banyak hasil "Dieskalasikan – sistem yang tidak disengaja": Cari alat, konektor, atau alur yang gagal yang dipanggil agen.
• Banyak hasil "Ditinggalkan": Tinjau transkrip sesi untuk melihat di mana pengguna turun, misalnya setelah respons panjang atau pertanyaan klarifikasi berulang.