Not
Bu sayfaya erişim yetkilendirme gerektiriyor. Oturum açmayı veya dizinleri değiştirmeyi deneyebilirsiniz.
Bu sayfaya erişim yetkilendirme gerektiriyor. Dizinleri değiştirmeyi deneyebilirsiniz.
[Bu makale yayın öncesi belgedir ve değişebilir.]
Test seti, ajanınızın performansını değerlendirmek için kullandığınız bir dizi konuşmadır. Her bir konuşma, aracınızın ele almasını istediğiniz bir senaryoyu temsil eder.
Important
- Bu, üretime hazır bir önizleme özelliğidir.
- Üretime hazır önizlemeler ek kullanım koşullarına tabidir.
Prerequisites
GitHub Copilot koşumuyla oluşturulan ve kurtarılan bir ajan. Bkz. Bir aracı oluştur (önizleme).
Yeni bir değerlendirme başlatın
Yeni bir değerlendirmeye başlamak için:
- Temsilcinizi Copilot Studio'da açın.
- Değerlendir sekmesini seçin.
- Yeni değerlendirmeyi seçin.
Seçeneklerden birini belirleyin:
Seçenek 1: konuşmaları bir CSV dosyasından yükle
Değerlendir sekmesinde, Veri kaynağı bölümünde, bir CSV dosyasını yükleme alanına sürükleyin veya dosyaya göz atmak için seçin.
Tip
Doğru dosya formatını gösteren bir şablonu indirmek için CSV bağlantısını seçin. Maksimum dosya boyutu 5 MB'dır.
İçe aktarılan konuşmaları gözden geçirin ve gerektiğinde ayarlayın.
Sağdaki Test kümesini yapılandır panelinde, değerlendirme için bir Ad girin.
Değerlendirmeyi çalıştırmak için Evaluate seçin veya çalıştırmadan kaydetmek için Kaydet'i seçin.
Seçenek 2: Yapay Zeka ile konuşmalar oluştur
- Değerlendir sekmesinde, Başlatmanın daha fazla yolu bölümünde, Hızlı konuşma seti'ni seçin.
- Sistem, ajanın tanımı, talimatları ve konularına göre 10 konuşma oluşturana kadar bekleyin.
- Oluşturulan konuşmaları Test vakalarını incele listesinde inceleyin.
- Test seti Yapılandır paneline bir İsim girin ve ardından Değerlendir veya Kaydet seçeneğini seçin.
Ayrıca değerlendirme görünümünden daha fazla sohbet oluşturabilirsiniz. Ekle Konuşmalar>Ekle seçeneğini seç 10 konuşma oluştur. İlk değerlendirmeyi yaptıktan sonra, Daha fazla konuşma oluşturmak için Sohbet> Ekle25 sohbet yarat veya 50 sohbet oluştur seçeneğini seçin.
3. Seçenek: konuşmaları elle yazın
- Değerlendir sekmesinde, Daha fazla başlama yöntemi bölümünde, Ya da, bazı soruları kendiniz yazın seçeneğini seçin.
- Test vakalarını gözden geçir listesinde Ekle sohbetleri>yaz seçeneğini seçerek manuel bir test vakası oluşturun.
- Her konuşma için bir kullanıcı sorusu ekleyin. İsteğe bağlı olarak, beklenen bir ajan tepkisi ekleyin.
- Test kümesini yapılandır panelinde, bir Ad girin ve ardından Değerlendir veya Kaydet seçeneğini seçin.
Test kümesini yapılandır
Bir değerlendirme oluşturduğunuzda veya düzenlediğinizde, Test seti Yapılandır paneli şu seçenekleri içerir:
- İsim: Değerlendirme için gerekli bir isim.
- Test yöntemi: Yanıtları puanlayan yöntem. Genel kalite , yanıtların alaka ve tamlık gibi kalite standartlarını karşılayıp karşılamadığını kontrol eder.
- Kullanıcı profili: Değerlendirmeyi çalıştıran doğrulanmış profil. Hangi profilin testleri çalıştırdığını ayarlamak için Yönet'i seçin.
Test kümesindeki konuşmaları düzenle
Test setinde konuşmaları düzenlemek için:
- Değerlendir sekmesinde, Değerlendirme açılır menüsünden mevcut bir test kümesini açın.
- Mesajlarını düzenlemek için bir konuşmayı seçin.
- Daha fazla konuşma eklemek için Konuşma ekle açılır menüsünü kullanın.
- Bitirdiğinizde Kaydet'i seçin.