Κοινοποίηση μέσω


Δημιουργήστε ή τροποποιήστε ένα σύνολο δοκιμών για να αξιολογήσετε το copilot σας

[Αυτό το άρθρο αποτελεί τεκμηρίωση προέκδοσης και ενδέχεται να αλλάξει.]

Ένα σετ δοκιμής αποτελείται από μια ομάδα έως και 100 δοκιμαστικών περιπτώσεων. Όταν εκτελείτε μια αξιολόγηση εκπροσώπου, επιλέγετε ένα σύνολο δοκιμών και το Copilot Studio εκτελεί κάθε δοκιμαστική υπόθεση σε αυτό το σύνολο σε σχέση με το copilot σας.

Μπορείτε να δημιουργήσετε δοκιμαστικές περιπτώσεις σε ένα σύνολο δοκιμών με μη αυτόματο τρόπο, να τις εισαγάγετε χρησιμοποιώντας ένα υπολογιστικό φύλλο ή να χρησιμοποιήσετε AI για να δημιουργήσετε μηνύματα με βάση τη σχεδίαση και τους πόρους του copilot σας. Στη συνέχεια, μπορείτε να επιλέξετε πώς θέλετε να μετρήσετε την ποιότητα των απαντήσεων του αντιπροσώπου σας για κάθε δοκιμαστική περίπτωση σε ένα σύνολο δοκιμής.

Για περισσότερες πληροφορίες σχετικά με τον τρόπο λειτουργίας της αξιολόγησης φορέα, ανατρέξτε στο θέμα Πληροφορίες για την αξιολόγηση φορέα.

Για να μάθετε πώς μπορείτε να επεξεργαστείτε ένα υπάρχον σύνολο δοκιμής, ανατρέξτε στο θέμα Αλλαγή των λεπτομερειών ενός συνόλου δοκιμής.

Σημαντικό

Τα αποτελέσματα των δοκιμών είναι διαθέσιμα στο Copilot Studio για 89 ημέρες. Για να αποθηκεύσετε τα αποτελέσματα των δοκιμών σας για μεγαλύτερο χρονικό διάστημα, εξαγάγετε τα αποτελέσματα σε ένα αρχείο CSV.

Δημιουργία νέου συνόλου δοκιμών

  1. Μεταβείτε στη σελίδα αξιολόγησης του αντιπροσώπου σας.

Στιγμιότυπο οθόνης που δείχνει πώς να επιλέξετε την καρτέλα Αξιολόγηση όταν η επιλογή καρτέλας συμπιέζεται λόγω του μεγέθους της οθόνης.

  1. Επιλέξτε Νέα αξιολόγηση.

    Στιγμιότυπο οθόνης που εμφανίζει το κουμπί Δημιουργία νέας δοκιμής στη σελίδα Αξιολόγηση.

  2. Στη σελίδα Νέα αξιολόγηση , επιλέξτε τη μέθοδο που θέλετε να χρησιμοποιήσετε για να δημιουργήσετε το σύνολο δοκιμής. Ένα σετ δοκιμών μπορεί να έχει έως και 100 δοκιμαστικές περιπτώσεις.

    • Ρύθμιση γρήγορης ερώτησης ώστε το Copilot Studio να δημιουργεί αυτόματα δοκιμαστικές υποθέσεις με βάση την περιγραφή, τις οδηγίες και τις δυνατότητες του copilot σας. Αυτή η επιλογή δημιουργεί 10 ερωτήσεις για την εκτέλεση μικρών, γρήγορων αξιολογήσεων ή για την έναρξη της δημιουργίας ενός μεγαλύτερου συνόλου δοκιμών.
    • Πλήρες σύνολο ερωτήσεων ώστε το Copilot Studio να δημιουργεί δοκιμαστικές περιπτώσεις χρησιμοποιώντας τις πηγές γνώσης ή τα θέματα του copilot σας και να επιλέγει τον αριθμό των ερωτήσεων που θα δημιουργηθούν.
    • Χρησιμοποιήστε τη δοκιμαστική συνομιλία σας για να συμπληρώσετε αυτόματα το δοκιμαστικό σύνολο με τις ερωτήσεις που δώσατε στη δοκιμαστική συνομιλία σας. Αυτή η μέθοδος χρησιμοποιεί ερωτήσεις από την πιο πρόσφατη δοκιμαστική συνομιλία. Μπορείτε επίσης να ξεκινήσετε μια αξιολόγηση από τη δοκιμαστική συνομιλία χρησιμοποιώντας το κουμπί αξιολόγησης . Στιγμιότυπο οθόνης που εμφανίζει το κουμπί Δημιουργία νέας δοκιμής στη δοκιμαστική συνομιλία.
    • Εισαγάγετε δοκιμαστικές περιπτώσεις από ένα αρχείο σύροντας το αρχείο σας στην καθορισμένη περιοχή, επιλέγοντας Αναζήτηση για να αποστείλετε ένα αρχείο ή επιλέγοντας μία από τις άλλες επιλογές αποστολής.
    • Εναλλακτικά, γράψτε μερικές ερωτήσεις μόνοι σας για να δημιουργήσετε χειροκίνητα ένα σύνολο δοκιμών. Ακολουθήστε τα βήματα για να επεξεργαστείτε ένα σύνολο δοκιμών για να προσθέσετε και να επεξεργαστείτε δοκιμαστικές περιπτώσεις.
    • Χρησιμοποιήστε δεδομένα παραγωγής με βάση θέματα από τα αναλυτικά στοιχεία του copilot σας. Στιγμιότυπο οθόνης που εμφανίζει την επιλογή
  3. Επεξεργαστείτε τις λεπτομέρειες των δοκιμαστικών περιπτώσεων. Όλες οι περιπτώσεις δοκιμών που χρησιμοποιούν μεθόδους, εκτός από τη γενική ποιότητα, απαιτούν αναμενόμενες απαντήσεις. Για περισσότερες πληροφορίες σχετικά με την επεξεργασία, ανατρέξτε στην ενότητα Τροποποίηση δοκιμαστικού συνόλου.

  4. Στην περιοχή Όνομα, πληκτρολογήστε ένα όνομα για το σύνολο δοκιμών σας.

  5. Αλλάξτε ή προσθέστε τις μεθόδους δοκιμής που θέλετε να χρησιμοποιήσετε:

    • Προσθέστε μια νέα μέθοδο:
      1. Επιλέξτε Προσθήκη μεθόδου δοκιμής.
      2. Επιλέξτε όλες τις μεθόδους με τις οποίες θέλετε να δοκιμάσετε και, στη συνέχεια, επιλέξτε OK. Μπορείτε να προσθέσετε πολλές μεθόδους.
      3. Για ορισμένες μεθόδους, ορίστε μια ελάχιστη απαιτούμενη βαθμολογία και, στη συνέχεια, επιλέξτε OK. Η ελάχιστη απαιτούμενη βαθμολογία καθορίζει τη βαθμολογία που οδηγεί σε επιτυχία ή αποτυχία.
      4. Ορισμένες μέθοδοι απαιτούν την προσθήκη αναμενόμενων απαντήσεων ή λέξεων-κλειδιών για κάθε μία από τις περιπτώσεις δοκιμής σας. Για περισσότερες πληροφορίες, ανατρέξτε στο θέμα Επιλογή μεθόδων αξιολόγησης.
    • Επιλέξτε μια υπάρχουσα μέθοδο δοκιμής για επεξεργασία ή διαγραφή.
    Μέθοδος δοκιμής Μετρήσεις Βαθμολογία Διαμορφώσεις
    Γενική ποιότητα Πόσο καλή είναι η απάντηση της δοκιμαστικής περίπτωσης με βάση συγκεκριμένες ιδιότητες Σκόραρε από 100% Κανένας
    Συγκρίνετε το νόημα Πόσο καλά ταιριάζει το νόημα της απάντησης της δοκιμαστικής περίπτωσης με την αναμενόμενη απάντηση Σκόραρε από 100% Ελάχιστη απαιτούμενη βαθμολογία, αναμενόμενη απάντηση
    Χρήση δυνατοτήτων Αν η δοκιμαστική περίπτωση χρησιμοποίησε τους αναμενόμενους πόρους Επιτυχία/αποτυχία Αναμενόμενες δυνατότητες
    Αντιστοίχιση λέξεων-κλειδιών Αν η δοκιμαστική περίπτωση χρησιμοποίησε όλες ή οποιαδήποτε από τις αναμενόμενες λέξεις-κλειδιά ή φράσεις Επιτυχία/αποτυχία Αναμενόμενες λέξεις-κλειδιά ή φράσεις
    Ομοιότητα κειμένου Πόσο καλά ταιριάζει το κείμενο της απάντησης της δοκιμαστικής περίπτωσης με την αναμενόμενη απάντηση Σκόραρε από 100% Ελάχιστη απαιτούμενη βαθμολογία, αναμενόμενη απάντηση
    Ακριβής αντιστοίχιση Εάν η απάντηση της δοκιμαστικής περίπτωσης ταιριάζει ακριβώς με την αναμενόμενη απάντηση Επιτυχία/αποτυχία Αναμενόμενη απάντηση
  6. Επιλέξτε Προφίλ χρήστη και, στη συνέχεια, επιλέξτε ή προσθέστε το λογαριασμό που θέλετε να χρησιμοποιήσετε για αυτό το σύνολο δοκιμής ή συνεχίστε χωρίς έλεγχο ταυτότητας. Η αξιολόγηση χρησιμοποιεί αυτόν τον λογαριασμό για να συνδεθεί με πηγές γνώσης και εργαλεία κατά τη διάρκεια της δοκιμής. Για πληροφορίες σχετικά με την προσθήκη και τη διαχείριση προφίλ χρηστών, ανατρέξτε στο θέμα Διαχείριση προφίλ χρηστών και συνδέσεων.

    Σημείωμα

    Η αυτοματοποιημένη δοκιμή χρησιμοποιεί τον έλεγχο ταυτότητας του επιλεγμένου δοκιμαστικού λογαριασμού. Εάν το copilot σας έχει προελεύσεις γνώσης ή συνδέσεις που απαιτούν συγκεκριμένο έλεγχο ταυτότητας, επιλέξτε τον κατάλληλο λογαριασμό για τη δοκιμή σας. Όταν το Copilot Studio δημιουργεί δοκιμαστικές υποθέσεις, χρησιμοποιεί τα διαπιστευτήρια ελέγχου ταυτότητας ενός συνδεδεμένου λογαριασμού για πρόσβαση στις προελεύσεις γνώσης και τα εργαλεία του copilot σας. Οι δοκιμαστικές περιπτώσεις ή τα αποτελέσματα που δημιουργούνται μπορεί να περιλαμβάνουν ευαίσθητες πληροφορίες στις οποίες έχει πρόσβαση ο συνδεδεμένος λογαριασμός και αυτές οι πληροφορίες είναι ορατές σε όλους τους δημιουργούς που μπορούν να έχουν πρόσβαση στο σύνολο δοκιμής.

  7. Επιλέξτε Αποθήκευση για να ενημερώσετε το σύνολο δοκιμής χωρίς να εκτελέσετε τις περιπτώσεις δοκιμής ή Αξιολόγηση για να εκτελέσετε αμέσως το σύνολο δοκιμής.

Περιορισμός δημιουργίας δοκιμαστικής περίπτωσης

Η δημιουργία δοκιμαστικής υπόθεσης αποτυγχάνει εάν μία ή περισσότερες ερωτήσεις παραβιάζουν τις ρυθμίσεις εποπτείας περιεχομένου του copilot σας. Οι πιθανοί λόγοι περιλαμβάνουν:

  • Οι οδηγίες ή τα θέματα του εκπροσώπου οδηγούν το μοντέλο στη δημιουργία περιεχομένου που επισημαίνει το σύστημα.
  • Η συνδεδεμένη προέλευση γνωσιακής βάσης περιλαμβάνει ευαίσθητο ή περιορισμένο περιεχόμενο.
  • Οι ρυθμίσεις εποπτείας περιεχομένου του copilot είναι υπερβολικά αυστηρές.

Για να επιλύσετε το πρόβλημα, δοκιμάστε διαφορετικές ενέργειες, όπως προσαρμογή πηγών γνώσης, ενημέρωση οδηγιών ή τροποποίηση ρυθμίσεων εποπτείας.

Ένα σετ δοκιμών μπορεί να περιέχει έως και 100 δοκιμαστικές περιπτώσεις.

Δημιουργήστε ένα σύνολο δοκιμών από γνώσεις ή θέματα

Μπορείτε να δοκιμάσετε το copilot σας δημιουργώντας ερωτήσεις χρησιμοποιώντας τις πληροφορίες και τις πηγές συνομιλίας που έχει ήδη το copilot σας. Αυτή η μέθοδος δοκιμής είναι καλή για τον έλεγχο του τρόπου με τον οποίο το copilot σας χρησιμοποιεί τις γνώσεις και τα θέματα που έχει ήδη, αλλά δεν είναι καλή για τον έλεγχο για κενά πληροφοριών.

Μπορείτε να δημιουργήσετε δοκιμαστικές περιπτώσεις χρησιμοποιώντας αυτές τις προελεύσεις γνώσης:

  • Κείμενο

  • Microsoft Word

  • Microsoft Excel

Μπορείτε να χρησιμοποιήσετε αρχεία έως 293 KB για να δημιουργήσετε ερωτήσεις δοκιμής.

Για να δημιουργήσετε ένα σύνολο δοκιμής:

  1. Στη Νέα αξιολόγηση, επιλέξτε Πλήρες σύνολο ερωτήσεων.

  2. Επιλέξτε είτε Γνώση είτε Θέματα.

    • Η γνώση λειτουργεί καλύτερα για εκπροσώπους που χρησιμοποιούν παραγωγική ενορχήστρωση. Αυτή η μέθοδος δημιουργεί ερωτήσεις χρησιμοποιώντας μια επιλογή από τις προελεύσεις γνώσης του εκπροσώπου σας.
    • Τα Θέματα λειτουργούν καλύτερα για εκπροσώπους που χρησιμοποιούν κλασική ενορχήστρωση. Αυτή η μέθοδος δημιουργεί ερωτήσεις χρησιμοποιώντας τα θέματα του εκπροσώπου σας.
  3. Για τη Γνώση, επιλέξτε τις πηγές γνώσης που θέλετε να συμπεριλάβετε στη δημιουργία ερωτήσεων.

Στιγμιότυπο οθόνης που δείχνει την επιλογή για προελεύσεις γνώσης που θα συμπεριληφθούν στη δημιουργία δοκιμαστικής περίπτωσης.

  1. Για τις Γνώσεις και τα Θέματα, επιλέξτε και σύρετε το ρυθμιστικό για να επιλέξετε τον αριθμό των ερωτήσεων που θα δημιουργηθούν.

Στιγμιότυπο οθόνης που δείχνει το ρυθμιστικό για να επιλέξετε πόσες ερωτήσεις θα δημιουργήσετε.

  1. Επιλέξτε Δημιουργία.

  2. Στην περιοχή Όνομα, πληκτρολογήστε ένα όνομα για το σύνολο δοκιμών σας.

    1. Αλλάξτε ή προσθέστε τις μεθόδους δοκιμής που θέλετε να χρησιμοποιήσετε:
    • Προσθέστε μια νέα μέθοδο:
      1. Επιλέξτε Προσθήκη μεθόδου δοκιμής.
      2. Επιλέξτε όλες τις μεθόδους με τις οποίες θέλετε να δοκιμάσετε και, στη συνέχεια, επιλέξτε OK. Μπορείτε να προσθέσετε πολλές μεθόδους.
      3. Για ορισμένες μεθόδους, ορίστε μια ελάχιστη απαιτούμενη βαθμολογία και, στη συνέχεια, επιλέξτε OK. Η ελάχιστη απαιτούμενη βαθμολογία καθορίζει τη βαθμολογία που οδηγεί σε επιτυχία ή αποτυχία.
      4. Ορισμένες μέθοδοι απαιτούν την προσθήκη αναμενόμενων απαντήσεων ή λέξεων-κλειδιών για κάθε μία από τις περιπτώσεις δοκιμής σας. Για περισσότερες πληροφορίες, ανατρέξτε στο θέμα Επιλογή μεθόδων αξιολόγησης
    • Επιλέξτε μια υπάρχουσα μέθοδο δοκιμής για επεξεργασία ή διαγραφή.
  3. Επεξεργαστείτε τις λεπτομέρειες των δοκιμαστικών περιπτώσεων. Όλες οι περιπτώσεις δοκιμών που χρησιμοποιούν μεθόδους, εκτός από τη γενική ποιότητα, απαιτούν αναμενόμενες απαντήσεις. Για περισσότερες πληροφορίες σχετικά με την επεξεργασία, ανατρέξτε στην ενότητα Τροποποίηση δοκιμαστικού συνόλου.

  4. Επιλέξτε Αποθήκευση για να ενημερώσετε το σύνολο δοκιμής χωρίς να εκτελέσετε τις περιπτώσεις δοκιμής ή Αξιολόγηση για να εκτελέσετε αμέσως το σύνολο δοκιμής.

Δημιουργήστε ένα αρχείο δοκιμαστικού συνόλου για εισαγωγή

Αντί να δημιουργείτε υποθέσεις δοκιμής απευθείας στο Copilot Studio, μπορείτε να δημιουργήσετε ένα αρχείο υπολογιστικού φύλλου με όλες τις υποθέσεις δοκιμής σας και να το εισαγάγετε για να δημιουργήσετε το σύνολο δοκιμών σας. Μπορείτε να συντάξετε κάθε ερώτηση δοκιμής, να προσδιορίσετε τη μέθοδο δοκιμής που θέλετε να χρησιμοποιήσετε και να δηλώσετε τις αναμενόμενες απαντήσεις για κάθε ερώτηση. Όταν ολοκληρώσετε τη δημιουργία του αρχείου, αποθηκεύστε το ως αρχείο .csv ή .txt και εισαγάγετε το στο Copilot Studio.

Σημαντικό

  • Το αρχείο μπορεί να περιέχει έως 100 ερωτήσεις.
  • Κάθε ερώτηση μπορεί να έχει έως 1.000 χαρακτήρες, συμπεριλαμβανομένων των διαστημάτων.
  • Το αρχείο πρέπει να είναι σε μορφή τιμών διαχωρισμένων με κόμματα (CSV) ή μορφή κειμένου.

Για τη δημιουργία του αρχείου εισαγωγής:

  1. Ανοίξτε μια εφαρμογή υπολογιστικού φύλλου (για παράδειγμα, Microsoft Excel).

  2. Προσθέστε τις ακόλουθες επικεφαλίδες, με αυτήν τη σειρά, στην πρώτη γραμμή:

    • Ερώτηση
    • Αναμενόμενη απάντηση
    • Μέθοδος δοκιμής
  3. Εισαγάγετε τις ερωτήσεις δοκιμής σας στη στήλη Ερώτηση . Κάθε ερώτηση μπορεί να είναι 1.000 χαρακτήρες ή λιγότεροι, συμπεριλαμβανομένων των διαστημάτων.

  4. Εισαγάγετε μία από τις ακόλουθες μεθόδους δοκιμής για κάθε ερώτηση στη στήλη Μέθοδος δοκιμής :

    • Γενική ποιότητα
    • Σύγκριση έννοιας
    • Ομοιότητα
    • Ακριβής αντιστοιχία
    • Αντιστοίχιση λέξεων-κλειδιών
  5. Εισαγάγετε τις αναμενόμενες απαντήσεις για κάθε ερώτηση στη στήλη Αναμενόμενη απάντηση . Οι αναμενόμενες απαντήσεις είναι προαιρετικές για την εισαγωγή ενός συνόλου δοκιμών. Ωστόσο, χρειάζεστε αναμενόμενες απαντήσεις για να εκτελέσετε αντιστοιχία, ομοιότητα και σύγκριση περιπτώσεων δοκιμής.

  6. Αποθηκεύστε το αρχείο ως αρχείο .csv ή .txt.

  7. Εισαγάγετε το αρχείο ακολουθώντας τα βήματα στην ενότητα Δημιουργία νέου συνόλου δοκιμής.

Δημιουργία συνόλου δοκιμών με βάση ένα θέμα

Δημιουργήστε ένα σύνολο δοκιμών με ερωτήσεις από συνομιλίες με πραγματικούς χρήστες. Αυτή η μέθοδος χρησιμοποιεί θέματα (προεπισκόπηση), που βρίσκονται στα αναλυτικά στοιχεία του copilot σας.

Τα θέματα είναι ομαδοποιήσεις ερωτήσεων που λαμβάνονται από το σύνολο των ερωτήσεων των χρηστών που ενεργοποιούν απαντήσεις που δημιουργούν. Όταν δημιουργείτε ένα σύνολο δοκιμών χρησιμοποιώντας ένα θέμα, δημιουργείτε τις δοκιμαστικές περιπτώσεις από ερωτήσεις που κάνουν οι χρήστες σχετικά με αυτό το θέμα.

Χρησιμοποιήστε αυτά τα σύνολα δοκιμών για να εκτελέσετε αξιολογήσεις που εστιάζουν σε μια περιοχή ή ένα θέμα του πεδίου εφαρμογής του copilot σας. Για παράδειγμα, εάν έχετε έναν αντιπρόσωπο εξυπηρέτησης πελατών, μπορείτε να παρακολουθείτε την ποιότητα των απαντήσεων για ερωτήσεις χρέωσης και πληρωμών ξεχωριστά από άλλες περιπτώσεις χρήσης, όπως η αντιμετώπιση προβλημάτων.

Σημείωμα

Πριν δημιουργήσετε δοκιμαστικά σύνολα από θέματα, χρειάζεστε πρόσβαση σε θέματα στα αναλυτικά στοιχεία. Εξετάστε τις προϋποθέσεις για τα θέματα (προεπισκόπηση).

  1. Στη σελίδα Ανάλυση του εκπροσώπου σας, μεταβείτε στη λίστα Θέματα .

  2. Τοποθετήστε το δείκτη του ποντικιού επάνω σε ένα θέμα και, στη συνέχεια, επιλέξτε Αξιολόγηση.

    Στιγμιότυπο οθόνης που εμφανίζει την επιλογή

    Μπορείτε επίσης να επιλέξετε Εμφάνιση όλων για να δείτε περισσότερα θέματα και, στη συνέχεια, να επιλέξετε Αξιολόγηση.

  3. Επιλέξτε Δημιουργία και άνοιγμα.

  4. Επεξεργαστείτε τις λεπτομέρειες των συνόλων δοκιμών και των περιπτώσεων. Όλες οι περιπτώσεις δοκιμών που χρησιμοποιούν μεθόδους, εκτός από τη γενική ποιότητα, απαιτούν αναμενόμενες απαντήσεις. Για περισσότερες πληροφορίες σχετικά με την επεξεργασία, ανατρέξτε στην ενότητα Τροποποίηση δοκιμαστικού συνόλου.

  5. Επιλέξτε Αποθήκευση για να ενημερώσετε το σύνολο δοκιμής χωρίς να εκτελέσετε τις περιπτώσεις δοκιμής ή Αξιολόγηση για να εκτελέσετε αμέσως το σύνολο δοκιμής.