Pantau gambaran umum agen

Tab Monitor di pengalaman agen baru memberi Anda visibilitas terhadap kinerja dan aktivitas agen Anda setelah penerapan. Gunakan untuk melacak sesi percakapan, meninjau analitik, mengidentifikasi kesalahan, dan memahami bagaimana pengguna berinteraksi dengan agen Anda.

Note

Fitur-fitur dalam artikel ini didukung oleh harness GitHub Copilot, yang menggunakan Kredit Copilot untuk penagihan berbasis penggunaan. Pelajari lebih lanjut tentang Kredit Copilot dalam Ikhtisar penagihan untuk agen yang didukung oleh harness GitHub Copilot.

Penagihan berbasis penggunaan berlaku untuk penggunaan, pembuatan, pengujian, dan evaluasi agen. Tindakan-tindakan ini mungkin menghabiskan Kredit Copilot.

Note

Tab Monitor tidak tersedia sampai Anda mempublikasikan agen Anda. Untuk membuatnya tersedia, pilih Publish.

Apa yang bisa Anda pantau?

Tab Monitor memberikan tampilan tingkat tinggi tentang kinerja agen Anda. Metrik utama meliputi:

  • Sesi percakapan: Jumlah total percakapan yang ditangani agen Anda.
  • Keterlibatan pengguna: Seberapa aktif pengguna berinteraksi dengan agen, termasuk jumlah pesan dan durasi sesi.
  • Pelacakan biaya dan penagihan: Konsumsi Kredit Copilot selama periode yang dipilih dan estimasi penghematan.
  • Total reaksi: Respons pengguna, termasuk umpan balik jempol ke atas dan jempol ke bawah serta komentar pada respons agen tertentu.
  • Kualitas respons: Indikator seberapa efektif agen merespons permintaan pengguna dari waktu ke waktu.

Saring dashboard berdasarkan rentang waktu untuk fokus pada aktivitas terbaru atau tren jangka panjang.

RINGKASAN

Area Summary menggunakan Copilot untuk menghasilkan ringkasan AI wawasan analitik utama tentang agen Anda. Pilih Lihat Selengkapnya untuk melihat daftar lengkap wawasan yang diringkas.

Ini membantu Anda dengan cepat mengidentifikasi tema umum, metrik utama, dan area yang perlu diperbaiki untuk periode pelaporan yang dipilih. Wawasan dapat mencakup metrik keterlibatan, sentimen dan umpan balik pelanggan, serta tren sejak periode pelaporan sebelumnya.

Biaya dan penagihan

Metrik biaya dan penagihan menunjukkan jumlah Kredit Copilot yang ditagihkan untuk periode yang dipilih dan memberikan estimasi penghematan untuk waktu dan biaya.

Pelajari lebih lanjut di Tarif dan pengelolaan penagihan.

Reaksi

Bagian Reaksi menampilkan umpan balik pengguna terhadap respons agen. Grafik menghitung seberapa sering pengguna memilih jempol ke atas (positif) atau jempol ke bawah (negatif) pada setiap respons yang mereka terima dari agen Anda.

Kemampuan agen

Bagian Kapabilitas membantu Anda memahami bagaimana pengguna berinteraksi dengan agen Anda dan di mana keandalan jawaban dapat meningkat. Ini termasuk:

  • Penggunaan alat: Alat apa saja yang digunakan agen selama sesi.

Pelacakan sesi

Daftar sesi menampilkan sesi percakapan individual dengan agen Anda. Setiap sesi mencakup:

  • Status: Apakah sesi telah selesai, gagal, atau sedang berlangsung.
  • Durasi: Berapa lama sesi berlangsung.
  • Pesan pengguna: Jumlah pesan yang dipertukarkan.
  • Alat yang digunakan: Alat apa saja yang digunakan agen selama sesi.

Filter sesi berdasarkan status, seperti gagal, selesai, atau sedang berjalan, untuk dengan cepat menemukan sesi yang perlu diperhatikan.

Pilih sesi untuk melihat transkrip lengkapnya, termasuk pesan pengguna, respons agen, dan detail tentang pemanggilan alat serta penggunaan sumber pengetahuan.

Pemantauan kesalahan

Tab Monitor membantu Anda mengidentifikasi dan mendiagnosis masalah:

  • Filter sesi berdasarkan status Gagal atau Ditolak untuk menemukan interaksi bermasalah.
  • Tinjau transkrip sesi untuk memahami apa yang salah.
  • Periksa status koneksi alat dan kesalahan autentikasi.
  • Cari pola pada sesi gagal yang mungkin menunjukkan masalah konfigurasi.

Untuk panduan langkah demi langkah menggunakan tab Monitor, lihat Pantau agen.

Unduh transkrip percakapan

Anda dapat mengunduh transkrip percakapan beberapa menit setelah waktu percakapan habis. Anda dapat mengunduh periode waktu berapa pun dalam 29 hari terakhir. Anda dapat mengunduhnya di Dataverse menggunakan portal Power Apps dan sebagai transkrip obrolan session menggunakan aplikasi Copilot Studio. Dapat memakan waktu hingga satu jam setelah sesi analitik berakhir sebelum data terkait muncul di tab Monitor.

Note

Anda tidak dapat mengunduh transkrip percakapan di Dataverse di aplikasi Copilot Studio di Teams. Untuk meninjau dan mengekspor transkrip di Dataverse, Anda perlu mendaftar aplikasi web Copilot Studio. Anda dapat mengunduh transkrip obrolan sesi dengan menggunakan aplikasi Copilot Studio. Untuk informasi selengkapnya, lihat Pengunduhan transkrip sesi agen.

  • Last updated on