Tanya Jawab penggunaan orkestrasi generatif

Pertanyaan umum (FAQ) ini menjelaskan dampak AI dari orkestrasi generatif untuk agen kustom bawaan Copilot Studio.

Apa itu orkestrasi generatif?

Orkestrasi generatif memungkinkan agen kustom Anda menjawab kueri pengguna dengan topik, alat, agen lain, dan sumber pengetahuan yang relevan, dan merespons pemicu acara.

Orkestrasi generatif memungkinkan percakapan yang lebih alami dengan mengisi input menggunakan detail dari riwayat percakapan. Misalnya, jika pengguna bertanya tentang toko terdekat di Kirkland, dan kemudian meminta informasi cuaca di sana, orkestrasi menyimpulkan bahwa maksud mereka adalah cuaca di Kirkland.

Agen yang dipicu dapat menggunakan orkestrasi generatif untuk menentukan alat, topik, atau agen terbaik untuk dipanggil sebagai respons terhadap aktivitas luar, memungkinkan kemampuan otonom. Misalnya, agen dapat memeriksa dan merekonsiliasi akun duplikat saat tabel Dataverse untuk akun penjualan menerima entri baru. Untuk informasi selengkapnya tentang membuat pemicu aktivitas untuk agen otonom, lihat Menambahkan pemicu aktivitas.

Sistem juga dapat menyatukan beberapa kemampuan—menjawab kueri seperti "Saya perlu mendapatkan jam toko dan menemukan toko terdekat saya"—dan mengajukan pertanyaan tindak lanjut jika detail yang diperlukan hilang atau ambigu.

Apa yang bisa dilakukan orkestrasi generatif?

Orkestrasi generatif membangun rencana untuk menjawab kueri pengguna atau pemicu kejadian menggunakan nama, deskripsi, input, dan output topik, alat, agen, dan pengetahuan yang tersedia.

Untuk percakapan, sistem mengacu pada 10 putaran terakhir riwayat percakapan untuk mengisi input dan menentukan kemampuan yang paling relevan untuk diaktifkan. Ini menindaklanjuti dengan pengguna untuk detail yang hilang atau tidak jelas, menjalankan rencana yang dipilih, dan kemudian menghasilkan respons berdasarkan output, termasuk petunjuk agen kustom apa pun.

Untuk pemicu aktivitas, orkestrasi menggunakan data aktivitas, petunjuk tingkat pemicu, dan petunjuk agen untuk memutuskan topik, alat, atau agen mana yang akan dipicu dan cara merespons.

Apa tujuan penggunaan orkestrasi generatif?

Anda dapat menggunakan orkestrasi generatif untuk membuat agen yang menanggapi kueri dan aktivitas pengguna dengan menalar topik, alat, agen lain, dan pengetahuan, menggunakan konteks dan metadata yang tersedia. Agen dapat mendelegasikan bagian tugas ke agen lain yang lebih cocok untuk menangani domain atau fungsi tertentu, memungkinkan desain modular dan dapat diskalakan.

Bagaimana orkestrasi generatif dievaluasi? Metrik apa yang digunakan untuk mengukur performa?

Kami mengevaluasi orkestrasi generatif di seluruh proses end-to-end: seberapa baik sistem ini mengidentifikasi rencana yang sesuai dan menjalankannya untuk menyelesaikan kueri atau merespons pemicu. Penilaian kualitas oleh peninjau manusia mencakup permintaan, input, dan konfigurasi yang berbeda.

Kami menilai kemampuan sistem untuk memilih alat, topik, agen, atau sumber pengetahuan yang sesuai, seberapa akurat menginterpretasikan niat pengguna, dan seberapa efektif memfilter konten berbahaya atau merugikan dari pengguna atau pembuat.

Apa batasan orkestrasi generatif? Bagaimana pengguna dapat meminimalkan dampaknya?

Untuk hasil terbaik, pastikan topik, alat, sumber pengetahuan, dan agen memiliki nama dan deskripsi berkualitas tinggi. Pelajari tentang menulis metadata yang efektif.

Agen yang dipanggil melalui orkestrasi—baik internal atau eksternal—harus dikonfigurasi dengan benar dan mampu menangani kueri atau peristiwa yang diteruskan kepada mereka. Jika agen penerima tidak dirancang untuk memproses tugas tertentu, agen tersebut mungkin mengembalikan respons yang tidak lengkap atau tidak relevan.

Saat ini, agen dengan pemicu peristiwa hanya menggunakan kredensial pembuat untuk autentikasi. Alat yang dipanggil oleh agen sebagai respons terhadap pemicu juga harus menggunakan kredensial pembuat. Untuk informasi selengkapnya, lihat perlindungan data untuk agen dengan pemicu.

Faktor dan pengaturan operasional apa yang memungkinkan penggunaan orkestrasi generatif yang efektif dan bertanggung jawab?

Orkestrasi generatif saat ini hanya didukung dalam bahasa Inggris. Anda dapat menguji performanya menggunakan panel pengujian, langsung di Copilot Studio. Anda juga dapat menambahkan petunjuk kustom untuk membentuk bagaimana sistem memilih dan menggunakan topik, alat, agen lain, atau pengetahuan.

Saat mendelegasikan tugas ke agen lainnya, penting untuk menguji alur interaksi untuk memastikan bahwa konteks diteruskan dengan jelas dan bahwa pengalihan tugas berperilaku seperti yang diharapkan.

Apa yang dimaksud dengan alat dan bagaimana agen dengan orkestrasi generatif menggunakannya?

Alat memungkinkan agen melakukan pengoperasian tertentu atau mengambil data untuk menjawab kueri pengguna atau menangani aktivitas. Organisasi Anda, Microsoft, dan mitra lain dapat membuat alat. Anda dapat mengonfigurasi alat mana yang tersedia, dan menyesuaikan metadatanya untuk mendukung orkestrasi generatif.

Data apa yang dapat disediakan oleh Copilot Studio untuk alat? Izin apa yang dimiliki alat Copilot Studio?

Saat agen memanggil alat, sistem mengirim nilai input yang diperlukan. Informasi ini dapat mencakup elemen riwayat percakapan atau data dari pemicu peristiwa. Ketika sistem mengkoordinasikan di antara agen-agen, sistem mendukung kontinuitas dengan meneruskan konteks relevan ke agen penerima.

Apa jenis masalah yang mungkin muncul saat agen menggunakan alat dan agen lainnya?

Kesalahan mungkin terjadi ketika agen menyiapkan input atau menghasilkan output, atau jika memilih alat, topik, atau agen yang salah. Untuk mencegah masalah tersebut, pastikan bahwa metadata akurat dan tidak ambigu di semua elemen yang tersedia untuk orkestrasi.

Informasi dari pemicu atau kueri pengguna mungkin menyertakan data yang tidak diinginkan atau sensitif. Jika informasi tersebut dirutekan ke topik, alat, atau agen lain, informasi tersebut mungkin menyebabkan output yang tidak diinginkan. Untuk informasi selengkapnya, lihat Pemecahan masalah dan batasan.

Perlindungan apa yang ada di dalam Copilot Studio untuk AI yang bertanggung jawab?

Copilot Studio mencakup berbagai perlindungan:

  • Agen hanya menggunakan pengetahuan, alat, topik, dan agen yang dikonfigurasi secara eksplisit oleh pembuat.
  • Admin dapat membatasi alat dan agen mana yang tersedia.
  • Pembuat dapat memerlukan konfirmasi pengguna sebelum menjalankan alat yang memodifikasi data.
  • Pemicu dan orkestrasi beroperasi di bawah autentikasi pembuat dan tunduk pada izin yang dikonfigurasi.
  • Pemeriksaan payload, pengklasifikasi, dan filter konten mendeteksi instruksi yang bersifat berbahaya atau merugikan dalam input pengguna, data pemicu, keluaran alat, dan konten pengetahuan.
  • Validasi entitas dengan ekspresi Power Fx dapat membatasi nilai input (misalnya, membatasi penerima email ke domain tertentu).
  • Anda dapat mengonfigurasi apakah riwayat percakapan lengkap diteruskan, dan tugas untuk diselesaikan, saat agen Anda mendelegasikan ke agen eksternal lainnya.

Jika potensi serangan terdeteksi (misalnya, dalam payload pemicu atau output alat), eksekusi diblokir dan kesalahan konten yang difilter muncul di peta aktivitas.

Untuk menjaga transparansi, agen menyertakan pesan default: "Hanya agar Anda sadar, saya terkadang menggunakan AI untuk menjawab pertanyaan Anda."

Bagaimana cara memberikan tanggapan tentang orkestrasi generatif?

Anda dapat memberikan umpan balik untuk Copilot Studio.