Αξιολόγηση παραγόντων (έκδοση προεπισκόπησης)

[Αυτό το άρθρο αποτελεί τεκμηρίωση προέκδοσης και ενδέχεται να αλλάξει.]

Η καρτέλα Αξιολόγηση στη νέα εμπειρία παράγοντα παρέχει δομημένες και επαναλαμβανόμενες δοκιμές για τον παράγοντα σας. Χρησιμοποιήστε αξιολογήσεις για να μετρήσετε την ποιότητα του copilot σε όλες τις δοκιμαστικές περιπτώσεις, να παρακολουθήσετε τις βελτιώσεις με την πάροδο του χρόνου και να επικυρώσετε τη συμπεριφορά του copilot σας πριν το δημοσιεύσετε.

Σημαντικό

Τι είναι η αξιολόγηση πρακτόρων;

Η αξιολόγηση παράγοντα σάς επιτρέπει να δοκιμάζετε συστηματικά τις απαντήσεις του παράγοντα σας σύμφωνα με πρότυπα ποιότητας. Αντί να δοκιμάζετε κάθε σενάριο με μη αυτόματο τρόπο στην καρτέλα Προεπισκόπηση , δημιουργήστε αξιολογήσεις με δοκιμαστικές συνομιλίες, ορίστε τον τρόπο μέτρησης των αποκρίσεων και εκτελέστε τις αξιολογήσεις για να λάβετε ποσοτικά αποτελέσματα.

Η αξιολόγηση σάς βοηθά να απαντήσετε σε ερωτήσεις όπως αυτές:

  • Απαντά σωστά ο παράγοντας σε μια ποικιλία αναμενόμενων σεναρίων;
  • Μια αλλαγή διαμόρφωσης βελτίωσε ή υποβάθμισε την ποιότητα απάντησης;
  • Ο πράκτορας χρησιμοποιεί εργαλεία όταν πρέπει;

Βασικές έννοιες

Οι ακόλουθες έννοιες είναι βασικές κατά την εκτέλεση αξιολογήσεων στο Copilot Studio:

Συνομιλίες

Μια συνομιλία είναι μια δοκιμαστική περίπτωση που αντιπροσωπεύει ένα σενάριο το οποίο θέλετε να χειριστεί ο παράγοντας σας. Κάθε συνομιλία περιλαμβάνει μηνύματα χρήστη και προαιρετικά αναμενόμενες απαντήσεις του παράγοντα. Οργανώστε τις συνομιλίες σε αξιολογήσεις. Δημιουργήστε συνομιλίες με μη αυτόματο τρόπο, δημιουργήστε τις με AI ή ανεβάστε τις από ένα αρχείο CSV.

Αξιολογήσεις

Μια αξιολόγηση είναι ένα ονομασμένο σύνολο δοκιμών που συνδυάζει συνομιλίες με μια μέθοδο δοκιμής. Από την καρτέλα Αξιολόγηση, δημιουργείτε αξιολογήσεις, προσθέτετε συνομιλίες σε αυτές και στη συνέχεια τις εκτελείτε για να λάβετε βαθμολογημένα αποτελέσματα.

Μέθοδοι δοκιμής

Οι μέθοδοι δοκιμής ορίζουν πώς βαθμολογούνται οι απαντήσεις του παράγοντα. Επί του παρόντος, η μόνη διαθέσιμη μέθοδος δοκιμών είναι η γενική ποιότητα, μια αξιολόγηση βάσει τεχνητής νοημοσύνης σχετικά με το κατά πόσον οι απαντήσεις πληρούν τα πρότυπα ποιότητας, όπως η συνάφεια και η πληρότητα.

Σημείωμα

Η μέθοδος δοκιμής γενικής ποιότητας δεν συγκρίνει τις απαντήσεις με τις αναμενόμενες.

Προφίλ χρήστη

Οι αξιολογήσεις εκτελούνται υπό προφίλ χρήστη. Διαχειριστείτε ποιο προφίλ με έλεγχο ταυτότητας εκτελεί την αξιολόγηση, ώστε τα εργαλεία και οι συνδέσεις του εκπροσώπου να είναι πλήρως ελέγξιμα.

Ροή εργασιών αξιολόγησης

Ακολουθήστε αυτά τα βήματα για να αξιολογήσετε έναν πράκτορα:

  1. Δημιουργήστε αξιολόγηση: Στην καρτέλα Αξιολόγηση, ξεκινήστε μια νέα αξιολόγηση. Μάθετε περισσότερα στο θέμα Δημιουργία συνόλου δοκιμής για εκπρόσωπο.
  2. Προσθήκη συνομιλιών: Προσθέστε δοκιμαστικές συνομιλίες γράφοντάς τις χειροκίνητα, δημιουργώντας τις με τεχνητή νοημοσύνη ή εισάγοντας ένα αρχείο CSV.
  3. Ρύθμιση παραμέτρων: Ονομάστε την αξιολόγηση, επιλέξτε μέθοδο δοκιμής, επιλέξτε την έκδοση του παράγοντα και ορίστε το προφίλ χρήστη.
  4. Εκτέλεση της αξιολόγησης: Επιλέξτε «Αξιολόγηση » για να εκτελέσετε τη δοκιμή και να περιμένετε τα αποτελέσματα. Μάθετε περισσότερα στο θέμα Εκτέλεση αξιολόγησης για εκπρόσωπο.
  5. Ελέγξτε τα αποτελέσματα: Αναλύστε τις βαθμολογίες και εντοπίστε τομείς προς βελτίωση. Μάθετε περισσότερα στην ενότητα Προβολή αποτελεσμάτων αξιολόγησης για έναν εκπρόσωπο.
  6. Επανάληψη: Προσαρμόστε τις οδηγίες, τις γνώσεις ή τα εργαλεία του εκπροσώπου σας και, στη συνέχεια, εκτελέστε ξανά την αξιολόγηση για να μετρήσετε τον αντίκτυπο.
  • Last updated on