Aracılığıyla paylaş


Testleri çalıştırın ve sonuçları görün

[Bu makale bir sürüm öncesi belgesidir ve değiştirilebilir.]

Değerlendirme sonuçlarını çalıştırın ve analiz ederek temsilcinizin davranışını optimize edin ve temsilcinizin iş ve kalite gereksinimlerinize uyduğunu doğrulayın. Ayrıca ajanınızı geliştirdikçe zamanla değişiklikleri görmek için bir test setini birden fazla kez çalıştırabilirsiniz.

Test sonuçları Copilot Studio'da 89 gün boyunca mevcuttur. Test sonuçlarınızı daha uzun süre kaydetmek için sonuçları bir CSV dosyasına aktarın .

Test kümesi çalıştırma

Bir test seti oluşturduktan sonra, zaman ve yinelemeler üzerinden sonuçları karşılaştırmak için çalıştırabilir veya tekrar çalıştırabilirsiniz. Bir testin yapılması birkaç dakikaya kadar sürebilir. Bir testi tek tek yapabilirsiniz.

Önemli

Kullanıcı doğrulaması kullanan ajan değerlendirmeleri, Microsoft Copilot Studio bağlantısı üzerinden erişim gerektirir. Yöneticiniz bu bağlantıyı kapatırsa, değerlendirme aracını kullanarak test yapamazsınız. Daha fazla bilgi için Copilot Studio bağlayıcıları ve veri gruplarına bakınız.

  1. Temsilcinizin Değerlendirme sayfasına gidin.

  2. Aşağıdaki işlemlerden birini uygulayarak test yapın:

    • Test seti oluşturma veya düzenlemenin sonunda, Değerlendir seçeneğini seçin.
    • Son sonuçlar bölümünde, test sonuçlarını aşağıdakilerden birini yaparak değerlendirin:
      • Değerlendirmek istediğiniz test sonucunun üzerine gelin, üç noktayı (...) seçin ve ardından tekrar Test setini Değerlendir'i seçin.
      • Test sonucunu açmak için seçin, ardından Değerlendirme özet panelinde üç noktayı (...) seçin ve ardından tekrar Test setini değerlendirin.

    Test setinin kullanıcı profilinde bağlantılar bozuluyorsa veya test setinde kullanıcı profili yoksa, Bağlantıları Yönet diyalogu görünür. Test için kullanıcı profili kullanmanıza gerek yok. Ancak bir profil kullanıyorsanız, tüm bağlantılar çalışıyor olmalı. Bağlantıları düzeltme hakkında bilgi için Kullanıcı profillerini ve bağlantıları yönet bölümünü inceleyebilirsiniz.

Bir değerlendirme birkaç dakika sürebilir. Test sonuçları görüntülenmeye hazır olduğunda Copilot Studio'da bir uyarı belirir.

Test sonuçlarına dalış

Bir test kümesiyle her değerlendirme çalıştırdığınızda Copilot Studio:

  1. Aracıyla yapılan konuşmaların simülasyonunu yapmak için bağlı kullanıcı hesabını kullanır ve test çalışması içindeki her soruyu aracıya gönderir.

  2. Aracının yanıtlarını toplar.

  3. Her yanıtın başarısını ölçür ve analiz eder. Her test durumu, test durumunun kriterlerine göre Geçti veya Başarısız notu alır.

  4. Geçme oranı puanı, test kümesinin Geçti/Kaldı oranına göre atanır.

Her test setinin geçme oranını , ajanınızın Değerlendirme sayfasında, Son sonuçlar bölümünde görebilirsiniz. Daha fazla test seti çalışmasını görmek için Tümünü gör'ü seçin.

Önceki değerlendirmelerin listesini gösteren ekran görüntüsü.

Bir test vakası için ayrıntılı bir analize bakınız

Bir test sonucunu açtığınızda, test çalışmasının detaylarını, testte kullanılan sorguların listesini, ajanın nasıl yanıt verdiğini ve Geç veya Başarısız puanını görebilirsiniz.

Her yanıtın ayrıntılı değerlendirmesini görmek için listeden bir test vakası seçin.

Tamamlanmış değerlendirme içindeki test çalışmalarının listesini gösteren ekran görüntüsü.

Değerlendirme, beklenen ve gerçek yanıtları, test sonucunun arkasındaki gerekçeleri ve ajanın yanıt vermek için kullandığı bilgi, konular ve araçları içerir.

Açmak için atıf edilen bir bilgi veya konuyu seçin.

Bir test çalışması için ayrıntılı sonucu ve değerlendirmeyi gösteren ekran görüntüsü.

Test sonuçlarını karşılaştırın

Ajanınızın bir versiyonunu test etmek ve değişiklik yapmadan önce ve sonra performanstaki değişiklikleri görmek istersiniz. Aynı test setinin iki denemesini karşılaştırarak Karşılaştırma aracını kullanarak yapabilirsiniz.

Karşılaştırma görmek için aynı test setini en az iki kez çalıştırmanız gerekir.

  1. Temsilcinizin Değerlendirme sayfasında, Son test sonuçları altında, karşılaştırma için temel olarak kullanmak istediğiniz test denemesini açın .

  2. Karşılaştır ile açılır menüsünü seçin ve ardından şu anda açık olan test sonuçlarıyla karşılaştırmak istediğiniz test zamanı ve tarihini seçin.

Karşılaştırma ile açılır menü ekran görüntüsü.

Test vakaları listesinde oklar, hangi test vakası sonuçlarının başarısızlıktan geçtiğine geçerken iyileştiğini veya geçişten başarısızlığa geçerek düşürüldüğünü gösterir.

Daha fazla detay görmek için bir test vakası seçin. Değerlendirme özet panelinde, mevcut test çalışmasının sonucunun üstünde yer aldığı test puanlarının doğrudan karşılaştırmasını görebilirsiniz.

İki test setinin karşılaştırılmış sonuçlarını gösteren ekran görüntüsü.

Test sonuçlarını dışarı aktarma

Test sonuçlarını CSV dosyasına dışa aktarabilirsiniz. Dosya, soru, beklenen yanıt (varsa), test yöntemi, geçme puanı (varsa), ajanın yanıtı, test sonucu ve her test vakası için analizleri listeler.

  1. Temsilcinizin Değerlendirme sayfasına gidin.
  2. Son sonuçlar bölümünde, aşağıdaki adımlardan birini uygulayarak test sonucunu dışa aktarabilirsiniz:
    • Dışa aktarmak istediğiniz test vakasının üzerine gelin, üç noktayı (...) seçin ve ardından Test sonuçlarını Dışa Aktar' seçin.
    • Açmak için test durumunu seçin, ardından Değerlendirme özeti panelinde üç noktayı (...) seçin ve ardından Test sonuçlarını dışa aktar seçeneğini seçin.

Test sonuçları indirilir, test setinizin adı.csv.