Δημιουργία ενός μοναδικού συνόλου δοκιμών απόκρισης

Μια αξιολόγηση μοναδικής απόκρισης ελέγχει τον πράκτορά σας σε μία μησυνδεδεμένη ερώτηση κάθε φορά, αντί για μια πλήρη συνομιλία. Για παράδειγμα, μια αξιολόγηση μοναδικής απόκρισης για έναν πράκτορα εξυπηρέτησης πελατών ρωτά Ποιες είναι οι ώρες εργασίας σας;, καταγράφει την απάντηση του παράγοντα σε αυτή την ερώτηση και, στη συνέχεια, ξεκινά με μια νέα ερώτηση, Πώς μπορώ να βρω το ιστορικό παραγγελιών μου;

Οι αξιολογήσεις μίας απόκρισης είναι καλές όταν θέλετε να ελέγξετε τον πράκτορά σας σχετικά με το πώς απαντά σε συγκεκριμένες ερωτήσεις, σχετικά με τις δυνατότητες που καλεί και την ακριβή διατύπωση που χρησιμοποιεί στις απαντήσεις του. Μπορείτε επίσης να εκτελέσετε αξιολόγηση συνομιλίας, η οποία σας επιτρέπει να αξιολογήσετε τη συμπεριφορά του παράγοντα σας σε μια μεγαλύτερη αλληλεπίδραση.

Οι αξιολογήσεις χρησιμοποιούν σύνολα δοκιμών. Μια δοκιμή που ορίζεται για αξιολογήσεις μοναδικής απόκρισης αποτελείται από μια ομάδα έως 100 περιπτώσεων δοκιμής. Όταν εκτελείτε μια αξιολόγηση παράγοντα, επιλέγετε ένα σύνολο δοκιμών και Copilot Studio εκτελεί κάθε υπόθεση δοκιμής που ορίζεται σε σχέση με τον πράκτορά σας.

Μπορείτε να δημιουργήσετε δοκιμαστικές περιπτώσεις σε ένα σύνολο δοκιμών με μη αυτόματο τρόπο, να τις εισαγάγετε χρησιμοποιώντας ένα υπολογιστικό φύλλο ή να χρησιμοποιήσετε AI για να δημιουργήσετε μηνύματα με βάση τη σχεδίαση και τους πόρους του copilot σας. Στη συνέχεια, μπορείτε να επιλέξετε πώς θέλετε να μετρήσετε την ποιότητα των απαντήσεων του αντιπροσώπου σας για κάθε δοκιμαστική περίπτωση σε ένα σύνολο δοκιμής.

Για περισσότερες πληροφορίες σχετικά με τον τρόπο λειτουργίας της αξιολόγησης φορέα, ανατρέξτε στο θέμα Πληροφορίες για την αξιολόγηση φορέα.

Για να μάθετε πώς μπορείτε να επεξεργαστείτε ένα υπάρχον σύνολο δοκιμής, ανατρέξτε στο θέμα Αλλαγή των λεπτομερειών ενός συνόλου δοκιμής.

Σημαντικό

Τα αποτελέσματα των δοκιμών είναι διαθέσιμα σε Copilot Studio για 89 ημέρες. Για να αποθηκεύσετε τα αποτελέσματα των δοκιμών σας για μεγαλύτερο χρονικό διάστημα, εξαγάγετε τα αποτελέσματα σε ένα αρχείο CSV.

Δημιουργία νέου συνόλου δοκιμών

1. Μεταβείτε στη σελίδα αξιολόγησης του αντιπροσώπου σας.

   

2. Επιλέξτε Νέα αξιολόγηση και, στη συνέχεια, επιλέξτε Μία απόκριση.

   

3. Επιλέξτε τη μέθοδο που θέλετε να χρησιμοποιήσετε για να δημιουργήσετε το σύνολο δοκιμών σας. Ένα σετ δοκιμών μπορεί να έχει έως και 100 δοκιμαστικές περιπτώσεις.

   • Γρήγορη σειρά ερωτήσεων για να δημιουργήσει το Copilot Studio αυτόματα σενάρια δοκιμής με βάση την περιγραφή, τις οδηγίες και τις δυνατότητες του πράκτορά σας. Αυτή η επιλογή δημιουργεί 10 ερωτήσεις για την εκτέλεση μικρών, γρήγορων αξιολογήσεων ή για την έναρξη της δημιουργίας ενός μεγαλύτερου συνόλου δοκιμών.
   • Πλήρες σετ ερωτήσεων για να δημιουργήσει το Copilot Studio υποθέσεις δοκιμής χρησιμοποιώντας μια πηγή γνώσης ή θέματα και επιλέγοντας τον αριθμό των ερωτήσεων που θα δημιουργηθούν.
   • Χρησιμοποιήστε τη δοκιμαστική συνομιλία σας για να συμπληρώσετε αυτόματα το δοκιμαστικό σύνολο με τις ερωτήσεις που δώσατε στη δοκιμαστική συνομιλία σας. Αυτή η μέθοδος χρησιμοποιεί ερωτήσεις από την πιο πρόσφατη δοκιμαστική συνομιλία. Μπορείτε επίσης να ξεκινήσετε μια αξιολόγηση από τη δοκιμαστική συνομιλία χρησιμοποιώντας το κουμπί αξιολόγησης .
   • Εισαγάγετε δοκιμαστικές περιπτώσεις από ένα αρχείο σύροντας το αρχείο σας στην καθορισμένη περιοχή, επιλέγοντας Αναζήτηση για να αποστείλετε ένα αρχείο ή επιλέγοντας μία από τις άλλες επιλογές αποστολής.
   • Εναλλακτικά, γράψτε μερικές ερωτήσεις μόνοι σας για να δημιουργήσετε χειροκίνητα ένα σύνολο δοκιμών. Ακολουθήστε τα βήματα για να επεξεργαστείτε ένα σύνολο δοκιμών για να προσθέσετε και να επεξεργαστείτε δοκιμαστικές περιπτώσεις.
   • Χρησιμοποιήστε δεδομένα παραγωγής βασισμένα σε θέματα από τα αναλυτικά στοιχεία του πράκτορά σας.

4. Στην περιοχή Όνομα, πληκτρολογήστε ένα όνομα για το σύνολο δοκιμών σας.

5. Αλλάξτε ή προσθέστε τις μεθόδους δοκιμής που θέλετε να χρησιμοποιήσετε:

   • Προσθέστε μια νέα μέθοδο:
     1. Επιλέξτε Προσθήκη μεθόδου δοκιμής.
     2. Επιλέξτε όλες τις μεθόδους με τις οποίες θέλετε να δοκιμάσετε και, στη συνέχεια, επιλέξτε OK.
     3. Ορισμένες μέθοδοι απαιτούν βαθμολογία επιτυχίας. Η βαθμολογία επιτυχίας καθορίζει τι βαθμολογία οδηγεί σε επιτυχία ή αποτυχία. Ορίστε τη βαθμολογία και, στη συνέχεια, επιλέξτε OK.
     4. Ορισμένες μέθοδοι απαιτούν την προσθήκη αναμενόμενων απαντήσεων ή λέξεων-κλειδιών για κάθε μία από τις περιπτώσεις δοκιμής σας. Για περισσότερες πληροφορίες, ανατρέξτε στο θέμα Επιλογή μεθόδων αξιολόγησης
   • Επιλέξτε μια υπάρχουσα μέθοδο δοκιμής για επεξεργασία ή διαγραφή.

   Μέθοδος δοκιμής	Μετρήσεις	Τύπος συνόλου δοκιμών	Βαθμολογία	Διαμορφώσεις
   Γενική ποιότητα	Πόσο καλές είναι οι απαντήσεις μιας υπόθεσης δοκιμής που βασίζονται σε συγκεκριμένες ιδιότητες	Μεμονωμένη απάντηση ή συνομιλία	Βαθμολογήθηκε με άριστα 100%	Κανένας
   Συγκρίνετε το νόημα	Πόσο καλά ταιριάζει το νόημα της απάντησης της δοκιμαστικής περίπτωσης με την αναμενόμενη απάντηση	Μία απόκριση	Βαθμολογήθηκε με άριστα 100%	Ελάχιστη απαιτούμενη βαθμολογία, αναμενόμενη απάντηση
   Χρήση δυνατοτήτων	Εάν η υπόθεση δοκιμής χρησιμοποίησε όλους ή οποιουσδήποτε αναμενόμενους πόρους	Μία απόκριση	Επιτυχία/αποτυχία	Αναμενόμενες δυνατότητες
   Αντιστοίχιση λέξεων-κλειδιών	Αν η δοκιμαστική περίπτωση χρησιμοποίησε όλες ή οποιαδήποτε από τις αναμενόμενες λέξεις-κλειδιά ή φράσεις	Μεμονωμένη απάντηση ή συνομιλία	Επιτυχία/αποτυχία	Αναμενόμενες λέξεις-κλειδιά ή φράσεις
   Ομοιότητα κειμένου	Πόσο καλά ταιριάζει το κείμενο της απάντησης της δοκιμαστικής περίπτωσης με την αναμενόμενη απάντηση	Μία απόκριση	Βαθμολογήθηκε με άριστα 100%	Ελάχιστη απαιτούμενη βαθμολογία, αναμενόμενη απάντηση
   Ακριβής αντιστοίχιση	Εάν η απάντηση της δοκιμαστικής περίπτωσης ταιριάζει ακριβώς με την αναμενόμενη απάντηση	Μία απόκριση	Επιτυχία/αποτυχία	Αναμενόμενη απάντηση

6. Επεξεργαστείτε τις λεπτομέρειες των δοκιμαστικών περιπτώσεων. Όλες οι μέθοδοι δοκιμής, εκτός από τη γενική ποιότητα, απαιτούν αναμενόμενες απαντήσεις ή λέξεις-κλειδιά. Για περισσότερες πληροφορίες σχετικά με την επεξεργασία υποθέσεων δοκιμής, ανατρέξτε στο θέμα Τροποποίηση ενός συνόλου δοκιμών.

7. Επιλέξτε Προφίλ χρήστη και, στη συνέχεια, επιλέξτε ή προσθέστε τον λογαριασμό που θέλετε να χρησιμοποιήσετε για αυτό το σύνολο δοκιμής ή συνεχίστε χωρίς έλεγχο ταυτότητας. Η αξιολόγηση χρησιμοποιεί αυτόν τον λογαριασμό για να συνδεθεί με πηγές γνώσης και εργαλεία κατά τη διάρκεια της δοκιμής. Εάν επιλεγεί διαφορετικός λογαριασμός για αξιολόγηση από τον λογαριασμό με έλεγχο ταυτότητας σύνδεσης, οι παράγοντες που χρησιμοποιούν συνδέσεις ή εργαλεία θα αποτύχουν. Για πληροφορίες σχετικά με την προσθήκη και τη διαχείριση προφίλ χρηστών, ανατρέξτε στο θέμα Διαχείριση προφίλ χρηστών και συνδέσεων.

   Σημείωμα

   Η αυτοματοποιημένη δοκιμή χρησιμοποιεί τον έλεγχο ταυτότητας του επιλεγμένου δοκιμαστικού λογαριασμού. Εάν ο πράκτοράς σας έχει πηγές γνώσης ή δικτυακές συνδέσεις που απαιτούν συγκεκριμένο έλεγχο ταυτότητας, επιλέξτε τον κατάλληλο λογαριασμό για τις δοκιμές σας. Όταν Copilot Studio δημιουργεί υποθέσεις δοκιμής, χρησιμοποιεί τα διαπιστευτήρια ελέγχου ταυτότητας ενός συνδεδεμένου λογαριασμού για πρόσβαση στις προελεύσεις γνώσεων και τα εργαλεία του παράγοντα σας. Οι υποθέσεις δοκιμής που δημιουργούνται μπορεί να περιλαμβάνουν ευαίσθητα δεδομένα στα οποία μπορεί να έχει πρόσβαση ο συνδεδεμένος λογαριασμός. Οποιοσδήποτε κατασκευαστής με πρόσβαση στον παράγοντα μπορεί επίσης να προβάλει τα σύνολα δοκιμών που είναι συνδεδεμένα με αυτόν τον παράγοντα.

8. Επιλέξτε Αποθήκευση για να ενημερώσετε το σύνολο δοκιμής χωρίς να εκτελέσετε τις περιπτώσεις δοκιμής ή Αξιολόγηση για να εκτελέσετε αμέσως το σύνολο δοκιμής.

Περιορισμός δημιουργίας δοκιμαστικής περίπτωσης

Η δημιουργία δοκιμαστικής υπόθεσης αποτυγχάνει εάν μία ή περισσότερες ερωτήσεις παραβιάζουν τις ρυθμίσεις εποπτείας περιεχομένου του copilot σας. Οι πιθανοί λόγοι περιλαμβάνουν:

• Οι οδηγίες ή τα θέματα του εκπροσώπου οδηγούν το μοντέλο στη δημιουργία περιεχομένου που επισημαίνει το σύστημα.
• Η συνδεδεμένη προέλευση γνωσιακής βάσης περιλαμβάνει ευαίσθητο ή περιορισμένο περιεχόμενο.
• Οι ρυθμίσεις εποπτείας περιεχομένου του αντιπροσώπου είναι πολύ αυστηρές.

Για να επιλύσετε το πρόβλημα, δοκιμάστε διαφορετικές ενέργειες, όπως προσαρμογή πηγών γνώσης, ενημέρωση οδηγιών ή τροποποίηση ρυθμίσεων εποπτείας.

Ένα σετ δοκιμών μπορεί να περιέχει έως και 100 δοκιμαστικές περιπτώσεις.

Δημιουργήστε ένα σύνολο δοκιμών από γνώσεις ή θέματα

Μπορείτε να δοκιμάσετε το copilot σας δημιουργώντας ερωτήσεις χρησιμοποιώντας τις πληροφορίες και τις πηγές συνομιλίας που έχει ήδη το copilot σας. Αυτή η μέθοδος δοκιμών είναι καλή για να ελέγξετε τον τρόπο με τον οποίο ο πράκτοράς σας χρησιμοποιεί μια προέλευση γνώσεων ή θέματα που έχει ήδη, αλλά δεν είναι καλή για δοκιμές για κενά πληροφοριών.

Μπορείτε να δημιουργήσετε δοκιμαστικές περιπτώσεις χρησιμοποιώντας αυτές τις προελεύσεις γνώσης:

• Κείμενο

• Microsoft Word

• Microsoft Excel

Μπορείτε να χρησιμοποιήσετε αρχεία έως 5 MB για τη δημιουργία ερωτήσεων δοκιμής.

Για να δημιουργήσετε ένα σύνολο δοκιμής:

1. Στη Νέα αξιολόγηση, επιλέξτε Πλήρες σύνολο ερωτήσεων.

2. Επιλέξτε είτε Γνώση είτε Θέματα.

   • Η γνώση λειτουργεί καλύτερα για εκπροσώπους που χρησιμοποιούν παραγωγική ενορχήστρωση. Αυτή η μέθοδος δημιουργεί ερωτήσεις χρησιμοποιώντας μία από τις προελεύσεις γνώσεων του παράγοντα σας.
   • Τα Θέματα λειτουργούν καλύτερα για εκπροσώπους που χρησιμοποιούν κλασική ενορχήστρωση. Αυτή η μέθοδος δημιουργεί ερωτήσεις χρησιμοποιώντας τα θέματα του εκπροσώπου σας.

3. Για τις Γνώσεις, επιλέξτε την προέλευση γνώσεων που θέλετε να χρησιμοποιήσετε για να δημιουργήσετε ερωτήσεις.

   

4. Για τις Γνώσεις και τα Θέματα, επιλέξτε και σύρετε το ρυθμιστικό για να επιλέξετε τον αριθμό των ερωτήσεων που θα δημιουργηθούν.

   

5. Επιλέξτε Δημιουργία.

6. Στην περιοχή Όνομα, πληκτρολογήστε ένα όνομα για το σύνολο δοκιμών σας.

7. 1. Αλλάξτε ή προσθέστε τις μεθόδους δοκιμής που θέλετε να χρησιμοποιήσετε:
   • Προσθέστε μια νέα μέθοδο:
     1. Επιλέξτε Προσθήκη μεθόδου δοκιμής.
     2. Επιλέξτε όλες τις μεθόδους με τις οποίες θέλετε να δοκιμάσετε και, στη συνέχεια, επιλέξτε OK. Μπορείτε να προσθέσετε πολλές μεθόδους.
     3. Για ορισμένες μεθόδους, ορίστε μια ελάχιστη απαιτούμενη βαθμολογία και, στη συνέχεια, επιλέξτε OK. Η βαθμολογία επιτυχίας καθορίζει τι βαθμολογία οδηγεί σε επιτυχία ή αποτυχία.
     4. Ορισμένες μέθοδοι απαιτούν την προσθήκη αναμενόμενων απαντήσεων ή λέξεων-κλειδιών για κάθε μία από τις περιπτώσεις δοκιμής σας. Για περισσότερες πληροφορίες, ανατρέξτε στο θέμα Επιλογή μεθόδων αξιολόγησης
   • Επιλέξτε μια υπάρχουσα μέθοδο δοκιμής για επεξεργασία ή διαγραφή.

8. Επεξεργαστείτε τις λεπτομέρειες των δοκιμαστικών περιπτώσεων. Όλες οι περιπτώσεις δοκιμών που χρησιμοποιούν μεθόδους, εκτός από τη γενική ποιότητα, απαιτούν αναμενόμενες απαντήσεις. Για περισσότερες πληροφορίες σχετικά με την επεξεργασία, ανατρέξτε στην ενότητα Τροποποίηση δοκιμαστικού συνόλου.

9. Επιλέξτε Αποθήκευση για να ενημερώσετε το σύνολο δοκιμής χωρίς να εκτελέσετε τις περιπτώσεις δοκιμής ή Αξιολόγηση για να εκτελέσετε αμέσως το σύνολο δοκιμής.

Δημιουργήστε ένα αρχείο δοκιμαστικού συνόλου για εισαγωγή

Αντί να δημιουργείτε υποθέσεις δοκιμής απευθείας σε Copilot Studio, μπορείτε να δημιουργήσετε ένα αρχείο υπολογιστικού φύλλου με όλες τις υποθέσεις δοκιμής σας και να το εισαγάγετε για να δημιουργήσετε το σύνολο δοκιμών σας. Μπορείτε να συντάξετε κάθε ερώτηση δοκιμής, να προσδιορίσετε τη μέθοδο δοκιμής που θέλετε να χρησιμοποιήσετε και να δηλώσετε τις αναμενόμενες απαντήσεις για κάθε ερώτηση. Όταν ολοκληρώσετε τη δημιουργία του αρχείου, αποθηκεύστε το ως αρχείο .csv ή .txt και εισαγάγετε το στο Copilot Studio.

Σημαντικό

• Το αρχείο μπορεί να περιέχει έως 100 ερωτήσεις.
• Κάθε ερώτηση μπορεί να έχει έως 1.000 χαρακτήρες, συμπεριλαμβανομένων των διαστημάτων.
• Το αρχείο πρέπει να είναι σε μορφή τιμών διαχωρισμένων με κόμματα (CSV) ή μορφή κειμένου.

Για τη δημιουργία του αρχείου εισαγωγής:

1. Ανοίξτε μια εφαρμογή υπολογιστικού φύλλου (για παράδειγμα, Microsoft Excel). Μπορείτε να κάνετε λήψη ενός προτύπου CSV στην περιοχή Προέλευση δεδομένων μετά την επιλογή Νέα αξιολόγηση.

2. Προσθέστε τις ακόλουθες επικεφαλίδες, με αυτήν τη σειρά, στην πρώτη γραμμή:

   • Ερώτηση
   • Αναμενόμενη απάντηση
   • Μέθοδος δοκιμής

3. Εισαγάγετε τις ερωτήσεις δοκιμής σας στη στήλη Ερώτηση . Κάθε ερώτηση μπορεί να είναι 1.000 χαρακτήρες ή λιγότεροι, συμπεριλαμβανομένων των διαστημάτων.

4. Εισαγάγετε μία από τις ακόλουθες μεθόδους δοκιμής για κάθε ερώτηση στη στήλη Μέθοδος δοκιμής :

   • Γενική ποιότητα
   • Συγκρίνετε το νόημα
   • Ομοιότητα
   • Ακριβής αντιστοίχιση
   • Αντιστοίχιση λέξεων-κλειδιών

5. Εισαγάγετε τις αναμενόμενες απαντήσεις για κάθε ερώτηση στη στήλη Αναμενόμενη απάντηση . Οι αναμενόμενες απαντήσεις είναι προαιρετικές για την εισαγωγή ενός συνόλου δοκιμών. Ωστόσο, χρειάζεστε αναμενόμενες απαντήσεις για να εκτελέσετε αντιστοιχία, ομοιότητα και σύγκριση περιπτώσεων δοκιμής.

6. Αποθηκεύστε το αρχείο ως αρχείο .csv ή .txt.

7. Εισαγάγετε το αρχείο ακολουθώντας τα βήματα στην ενότητα Δημιουργία νέου συνόλου δοκιμής.

Δημιουργία συνόλου δοκιμών με βάση ένα θέμα

Δημιουργήστε ένα σύνολο δοκιμών με ερωτήσεις από συνομιλίες με πραγματικούς χρήστες. Αυτή η μέθοδος χρησιμοποιεί θέματα (προεπισκόπηση), που βρίσκονται στα αναλυτικά στοιχεία του πράκτορά σας.

Τα θέματα είναι ομαδοποιήσεις ερωτήσεων που λαμβάνονται από το σύνολο των ερωτήσεων των χρηστών που ενεργοποιούν απαντήσεις που δημιουργούν. Όταν δημιουργείτε ένα σύνολο δοκιμών χρησιμοποιώντας ένα θέμα, δημιουργείτε τις δοκιμαστικές περιπτώσεις από ερωτήσεις που κάνουν οι χρήστες σχετικά με αυτό το θέμα.

Χρησιμοποιήστε αυτά τα σύνολα δοκιμών για να εκτελέσετε αξιολογήσεις που εστιάζουν σε μια περιοχή ή ένα θέμα του πεδίου εφαρμογής του copilot σας. Για παράδειγμα, εάν έχετε έναν αντιπρόσωπο εξυπηρέτησης πελατών, μπορείτε να παρακολουθείτε την ποιότητα των απαντήσεων για ερωτήσεις χρέωσης και πληρωμών ξεχωριστά από άλλες περιπτώσεις χρήσης, όπως η αντιμετώπιση προβλημάτων.

Σημείωμα

Πριν δημιουργήσετε δοκιμαστικά σύνολα από θέματα, χρειάζεστε πρόσβαση σε θέματα στα αναλυτικά στοιχεία. Εξετάστε τις προϋποθέσεις για τα θέματα (προεπισκόπηση).

1. Στη σελίδα Ανάλυση του εκπροσώπου σας, μεταβείτε στη λίστα Θέματα .

2. Τοποθετήστε το δείκτη του ποντικιού επάνω σε ένα θέμα και, στη συνέχεια, επιλέξτε Αξιολόγηση.

   

   Μπορείτε επίσης να επιλέξετε Εμφάνιση όλων για να δείτε περισσότερα θέματα και, στη συνέχεια, να επιλέξετε Αξιολόγηση.

3. Επιλέξτε Δημιουργία και άνοιγμα.

4. Επεξεργαστείτε τις λεπτομέρειες των συνόλων δοκιμών και των περιπτώσεων. Όλες οι περιπτώσεις δοκιμών που χρησιμοποιούν μεθόδους, εκτός από τη γενική ποιότητα, απαιτούν αναμενόμενες απαντήσεις. Για περισσότερες πληροφορίες σχετικά με την επεξεργασία, ανατρέξτε στην ενότητα Τροποποίηση δοκιμαστικού συνόλου.

5. Επιλέξτε Αποθήκευση για να ενημερώσετε το σύνολο δοκιμής χωρίς να εκτελέσετε τις περιπτώσεις δοκιμής ή Αξιολόγηση για να εκτελέσετε αμέσως το σύνολο δοκιμής.