Test setinin detaylarını değiştirin

Test setlerini kullanarak ajanınızın gerçek dünya yanıt senaryolarını nasıl ele aldığını değerlendirin ve geliştirin. Bu makale, bir test setinin adını ve ayarlarını nasıl değiştireceğini, kimlik doğrulama için kullanılan kullanıcı profilini ve bağlantıları nasıl yöneteceğini, bireysel test vakalarını nasıl düzenleyeceğinizi veya sileceğinizi ve tüm test setlerini veya sonuçlarını nasıl kaldıracağınızı açıklar. Bu adımlar, değerlendirmelerin doğru kullanıcı bağlamlarını yansıtmasını ve bilgi kaynakları ile araçlara güvenli erişimi sağlamanızı sağlar.

Ajan yanıtlarını değerlendirmek için üç test yöntemi seçeneğiniz vardır, bunlar da notlayıcı olarak da adlandırılır: kalite, benzerlik ve metin uyumu. Farklı test yöntemleri hakkında daha fazla bilgi için bkz Test yöntemleri.

Test setinin detaylarını düzenle

Bir test setinin detaylarını, örneğin kimlik doğrulama için hangi hesabı kullandığını ve kullanılan test yöntemlerini değiştirebilirsiniz.

1. Temsilcinizin Değerlendirme sayfasına gidin.

   

2. Test setini seçin.

3. Test kümesinde düzenlemek istediğiniz test çalışmalarını seçin.

4. İsteğe bağlı olarak, test setinin adını değiştirebilirsiniz.

5. Test yöntemlerini ekleyin veya değiştirin. Her test yöntemi farklı değerleri ölçer ve farklı konfigürasyonlar gerektirir. Her test yöntemini nasıl kuracağınızı öğrenmek için Test yöntemlerini seç bölümüne bakınız.

   Test yöntemi	Ölçümler	Test kümesi türü	Puanlama	Yapılandırmalar
   Genel kalite	Belirli niteliklere göre bir test çalışması yanıtının ne kadar iyi olduğu	Tek yanıt veya konuşma	100 üzerinden puanlanır	Hiç kimse
   Anlamı karşılaştır	Test vakasının cevabının anlamı beklenen cevapla ne kadar uyumlu olduğu	Tek yanıt	100 üzerinden puanlanır	Geçme puanı, beklenen cevap
   Yetenek kullanımı	Test durumu, beklenen kaynakların tamamını mı yoksa herhangi birini mi kullandı?	Tek yanıt	Geçme/başarısız	Beklenen yetenekler
   Anahtar kelime eşleşmesi	Test vakasında beklenen anahtar kelimelerin veya ifadelerin hepsini veya herhangi birini kullanıp kullanmadığı	Tek yanıt veya konuşma	Geçme/başarısız	Beklenen anahtar kelimeler veya ifadeler
   Metin benzerliği	Test vakasının cevabının metninin beklenen cevabla ne kadar uyumlu olduğu	Tek yanıt	100 üzerinden puanlanır	Geçme puanı, beklenen cevap
   Tam eşleşme	Test vakasının cevabının beklenen cevabla tam olarak eşleşip eşleşmediği	Tek yanıt	Geçme/başarısız	Beklenen cevap
   Özelleştirilmiş	Test çalışması yanıtının tanımlı ölçütlerinize veya beklentilerinize uygun olup olmadığı.	Tek yanıt veya konuşma	Başarılı/başarısız (tanımlı etiket ölçütlerini geçirir)	Ad, değerlendirme yönergeleri, etiketler

6. Hesap eklemek için Profili yönet'i seçin veya bağlantıları yönetmek için geçerli profili seçin veya farklı bir profil seçin. Otomatik test, seçilen test hesabının doğrulamasını kullanır. Çok profilli değerlendirme yalnızca bağlayıcı bağımlılıkları olmayan aracılar için desteklenir. Eğer temsilcinizin belirli kimlik doğrulama gerektiren bilgi kaynakları veya araçları varsa, test için uygun hesabı seçebilirsiniz. Daha fazla bilgi için bkz. Kullanıcı profillerini ve bağlantılarını yönetme.

Uyarı

Copilot Studio test senaryoları oluşturduğunda veya bir değerlendirme gerçekleştirdiğinde, araçlarınıza ve bilgi kaynaklarınıza erişmek için bağlı bir hesabın kimlik doğrulama bilgilerini kullanır. Oluşturulan test çalışmaları, bağlı hesabın erişebileceği hassas verileri içerebilir. Aracıya erişimi olan herhangi bir oluşturucu, bu aracıya bağlı test kümelerini de görüntüleyebilir.

Kullanıcı profillerini ve bağlantılarını yönetin

Test setlerini bir kullanıcının hesabının doğrulamasını kullanarak çalıştırabilirsiniz. Bu kimlik doğrulama yöntemi, ajanınızın hedeflerini tamamlamak için ihtiyaç duyduğu bilgi kaynaklarına ve araçlara erişmesini sağlar.

Belirli kullanıcı deneyimlerinin benzetimini yapmak için profilleri kullanabilirsiniz. Örneğin, bir yöneticinin kullanıcı profili, stajyerin kullanıcı profilinden farklı bilgi kaynaklarına erişebilir ve ajan farklı sonuçlar döndürür. Çok profilli değerlendirme yalnızca bağlayıcı bağımlılıkları olmayan aracılar için desteklenir.

Önemli

Test kümelerindeki kullanıcı profilleri araçlar için kimlik doğrulaması sağlayamaz. Değerlendirme çalıştırdığınızda, aracınızın araç bağlantılarını kimlik doğrulamasını sağlamak için oturum açmış hesabınızı kullanması gerekir. Farklı bir kullanıcı profili seçerseniz veya aracınızın araç bağlantıları kimlik doğrulaması için hesabınızı kullanmıyorsa değerlendirme "Bu hesap araçlara bağlanamıyor" iletisiyle başarısız olur. Sorunu çözmek için, araç bağlayıcıları ile yapılandırılmış hesapla oturum açın ve bir değerlendirme işlemi gerçekleştirin.

Test sonuçları hangi kullanıcı profilinin kullanıldığını gösterir.

Uyarı

Copilot Studio test senaryoları oluşturduğunda veya bir değerlendirme gerçekleştirdiğinde, araçlarınıza ve bilgi kaynaklarınıza erişmek için bağlı bir hesabın kimlik doğrulama bilgilerini kullanır. Oluşturulan test çalışmaları, bağlı hesabın erişebileceği hassas verileri içerebilir. Aracıya erişimi olan herhangi bir oluşturucu, bu aracıya bağlı test kümelerini de görüntüleyebilir.

Kullanıcı kimlik doğrulaması kullanan aracı değerlendirmeleri, Microsoft Copilot Studio bağlayıcısı üzerinden erişim gerektirir. Yöneticiniz bu bağlantıyı kapatırsa, değerlendirme aracını kullanarak test yapamazsınız. Daha fazla bilgi için bkz. Copilot Studio bağlayıcıları ve veri grupları.

Test setinde kullanıcı profili eklemek veya değiştirmek için:

1. Bir test seti açın, sonra Profili Yönet'i seçin.

   

2. Kullanıcı açılır menüsünü seçin, sonra:

   • Kullanmak istediğiniz kullanıcı hesabını seçin, ya da
   • Hesap ekle seçeneğini seçin, sonra hesaba giriş yapın.

   

3. Uyarı içeren bağlantılar için bağlantıyı seçin. Mevcut bağlantıyı çalışan bir bağlantıya dönüştürün, mevcut bağlantıyı yeniden kurmayı denemek için Yeniden Bağlayın ya da yeni bağlantı denemek için Yeni bağlantı oluştur'u seçin.

4. Yeni bağlantılar için istenen bağlantı detaylarını girin, ardından Bağla'yı seçin.

5. Tüm bağlantılar çalıştığında, Kaydet seçin.

Bir test setini veya test sonucunu sil

Artık ihtiyacınız olmayan bir test vakası veya test setini silebilirsiniz.

1. Temsilcinizin Değerlendirme sayfasına gidin.
2. Test setleri bölümünde, aşağıdaki adımlardan birini uygulayarak test setini silin:
   • Test seti kartındaki üç noktayı (...) seçin ve ardından Sil seçeneğini seçin.
   • Açmak için test setini seçin, ardından Test seti Yapılandır panelinde üç noktayı (...) seçin ve ardından Sil seçeneğini seçin.
3. Son sonuçlar bölümünde, aşağıdaki adımlardan birini uygulayarak test sonucunu silin:
   • Silmek istediğiniz test sonucunun üzerine gelin, üç noktayı (...) seçin ve ardından Testi Sil seçeneğini seçin.
   • Test sonucunu açmak için seçin, ardından Değerlendirme özet panelinde üç noktayı (...) seçin ve ardından Sil seçeneğini seçin.