Κοινοποίηση μέσω


Βελτίωση δοκιμής παράγοντα με το Copilot Studio Kit

Το Power CAT Copilot Studio Kit είναι μια εφαρμογή φιλική προς τον χρήστη, η οποία σας επιτρέπει να επαληθεύσετε τις απαντήσεις των αντιπροσώπων. Περιλαμβάνει επίσης εγγενείς δυνατότητες όπως εξαγωγή και εισαγωγή excel για μαζική δημιουργία και ενημερώσεις.

Ρύθμιση παραμέτρων, εκτέλεση και ανάλυση

Ρυθμίστε τις παραμέτρους και εκτελέστε δοκιμές σε σχέση με τα API του Copilot Studio (API Direct Line) για να αξιολογήσετε τις αποκρίσεις των αντιπροσώπων σε σχέση με τα αναμενόμενα αποτελέσματα.

Για να εμπλουτίσετε τα αποτελέσματα, ανακτήστε πρόσθετα σημεία δεδομένων από το Azure Application Insights και το Dataverse αναλύοντας εγγραφές κειμένου συνομιλίας (όπως το ακριβές όνομα θέματος και οι βαθμολογίες αναγνώρισης πρόθεσης που ενεργοποιήθηκαν).

Για απαντήσεις που δημιουργούνται από AI, οι οποίες δεν είναι ντετερμινιστικές από τη φύση τους, χρησιμοποιήστε προτροπές για να συγκρίνετε την απάντηση που δημιουργήθηκε με ένα δείγμα απάντησης ή οδηγίες επικύρωσης.

Διάγραμμα που εμφανίζει τα στοιχεία του Azure και του Power Platform που εμπλέκονται στη δοκιμή και ανάλυση των API Direct Line του Copilot Studio, συμπεριλαμβανομένων των Azure Application Insights, AI Builder και Dataverse.

Τύποι δοκιμής

Το εργαλείο υποστηρίζει αυτούς τους τύπους δοκιμών:

  • Αντιστοιχία απόκρισης
  • Συνημμένα όπως προσαρμόσιμες κάρτες
  • Αντιστοίχιση θέματος (απαιτεί Dataverse)
  • Δημιουργία απαντήσεων (απαιτεί το AI Builder για ανάλυση απόκρισης και το Application Insights για λεπτομέρειες σχετικά με τον λόγο για τον οποίο δεν δημιουργήθηκε μια απάντηση)
  • Ο τύπος δοκιμής πολλαπλών φάσεων είναι ένας ειδικός τύπος δοκιμής. Αποτελείται από ένα σύνολο περιπτώσεων δοκιμής κανονικών τύπων που εκτελούνται με μια καθορισμένη σειρά στο ίδιο περιβάλλον συνομιλίας. Χρησιμοποιήστε δοκιμές πολλαπλών σεναρίων για να δοκιμάσετε σενάρια από άκρο σε άκρο και για να δοκιμάσετε προσαρμοσμένους παράγοντες με παραγωγική ενορχήστρωση.
  • Η επικύρωση σχεδίου επιτρέπει στους δημιουργούς να επικυρώσουν ότι οι προσαρμοσμένοι παράγοντές τους που χρησιμοποιούν δημιουργία ενορχήστρωσης περιλαμβάνουν τα αναμενόμενα εργαλεία. Αντί να αξιολογεί αυτό που λέει ο παράγοντας, αυτός ο τύπος δοκιμής ελέγχει ότι το δυναμικό σχέδιο του παράγοντα περιλαμβάνει τα αναμενόμενα εργαλεία (εργαλεία, ενέργειες και συνδεδεμένους παράγοντες) σε ένα προκαθορισμένο όριο.

Μάθετε περισσότερα σχετικά με τους τύπους δοκιμών στο θέμα Ρύθμιση παραμέτρων δοκιμών στο Copilot Studio Kit.

Στιγμιότυπο οθόνης των λεπτομερειών αποτελέσματος εκτέλεσης δοκιμής, συμπεριλαμβανομένου ενός γραφικού που εμφανίζει το ποσοστό επιτυχίας και τον λανθάνοντα χρόνο για όλες τις εκτελέσεις δοκιμών.

Επόμενο βήμα