Δημιουργήστε σύνολο δοκιμών για έναν παράγοντας (έκδοση προεπισκόπησης)

[Αυτό το άρθρο αποτελεί τεκμηρίωση προέκδοσης και ενδέχεται να αλλάξει.]

Ένα σύνολο δοκιμής είναι μια συλλογή συνομιλιών που χρησιμοποιείτε για να αξιολογήσετε την απόδοση του copilot σας. Κάθε συνομιλία αντιπροσωπεύει ένα σενάριο που θέλετε να χειριστεί ο παράγοντας σας.

Σημαντικό

Προϋποθέσεις

Ένας παράγοντας που δημιουργήθηκε και αποθηκεύτηκε με το GitHub Copilot harness. Δείτε Δημιουργία παράγοντα (προεπισκόπηση).

Έναρξη νέας αξιολόγησης

Για να ξεκινήσετε μια νέα αξιολόγηση:

  1. Ανοίξτε τον ατζέντη σας στο Copilot Studio.
  2. Επιλέξτε την καρτέλα Αξιολόγηση.
  3. Επιλέξτε Νέα αξιολόγηση.

Επιλέξτε από μία από αυτές τις επιλογές:

Επιλογή 1: Μεταφόρτωση συνομιλιών από αρχείο CSV

  1. Στην καρτέλα Αξιολόγηση, στην ενότητα Πηγή δεδομένων, σύρετε ένα αρχείο CSV στην περιοχή μεταφόρτωσης ή επιλέξτε το για να το αναζητήσετε από τον υπολογιστή σας.

    Υπόδειξη

    Επιλέξτε τον σύνδεσμο CSV για να κατεβάσετε ένα πρότυπο με τη σωστή μορφή αρχείου. Το μέγιστο μέγεθος αρχείου είναι 5 MB.

  2. Ελέγξτε τις συνομιλίες που έχετε εισαγάγει και προσαρμόστε τις ανάλογα με τις ανάγκες.

  3. Στον πίνακα Διαμόρφωση συνόλου δοκιμής στα δεξιά, δώστε ένα Όνομα για την αξιολόγηση.

  4. Επιλέξτε Αξιολόγηση για να εκτελέσετε την αξιολόγηση ή επιλέξτε Αποθήκευση για να την αποθηκεύσετε χωρίς να εκτελεστεί.

2η επιλογή: Δημιουργήστε συνομιλίες με τεχνητή νοημοσύνη

  1. Στην καρτέλα Αξιολόγηση, στην ενότητα Περισσότεροι τρόποι έναρξης, επιλέξτε Γρήγορο σύνολο συνομιλιών.
  2. Περιμένετε μέχρι το σύστημα να δημιουργήσει 10 συνομιλίες με βάση την περιγραφή, τις οδηγίες και τα θέματα του πράκτορα.
  3. Εξετάστε τις συνομιλίες που δημιουργήθηκαν στη λίστα Έλεγχος των δοκιμαστικών περιπτώσεων.
  4. Στον πίνακα Ρύθμιση παραμέτρων συνόλου δοκιμών , εισαγάγετε ένα Όνομα και, στη συνέχεια, επιλέξτε Αξιολόγηση ή Αποθήκευση.

Μπορείτε επίσης να δημιουργήσετε περισσότερες συνομιλίες από την προβολή αξιολόγησης. Επιλέξτε Προσθήκη συνομιλιών>Δημιουργία 10 συνομιλιών. Αφού εκτελέσετε μια αρχική αξιολόγηση, επιλέξτε Προσθήκη συνομιλιών>Δημιουργία 25 συνομιλιών ή Δημιουργία 50 συνομιλιών για να δημιουργήσετε περισσότερες.

Επιλογή 3: Γράψτε συνομιλίες χειροκίνητα

  1. Στην καρτέλα Αξιολόγηση, στην ενότητα Περισσότεροι τρόποι έναρξης, επιλέξτε Ή, γράψτε μερικές ερωτήσεις μόνοι σας.
  2. Στη λίστα Έλεγχος των δοκιμαστικών> υποθέσεων, επιλέξτε Προσθήκη συνομιλιώνΕγγραφή για να δημιουργήσετε μια δοκιμαστική υπόθεση με μη αυτόματο τρόπο.
  3. Εισάγετε μια ερώτηση χρήστη για κάθε συνομιλία. Προαιρετικά, προσθέστε μια αναμενόμενη απόκριση εκπροσώπου.
  4. Στον πίνακα Ρύθμιση συνόλου δοκιμών, εισαγάγετε ένα Όνομα και επιλέξτε Αξιολόγηση ή Αποθήκευση.

Ρύθμιση παραμέτρων του δοκιμαστικού συνόλου

Όταν δημιουργείτε ή επεξεργάζεστε μια αξιολόγηση, ο πίνακας Ρύθμιση παραμέτρων συνόλου δοκιμών περιλαμβάνει τις εξής επιλογές:

  • Όνομα: Υποχρεωτικό όνομα για την αξιολόγηση.
  • Μέθοδος δοκιμής: Η μέθοδος που βαθμολογεί τις απαντήσεις. Η γενική ποιότητα ελέγχει εάν οι απαντήσεις πληρούν τα πρότυπα ποιότητας, όπως η συνάφεια και η πληρότητα.
  • Προφίλ χρήστη: Το προφίλ με έλεγχο ταυτότητας που εκτελεί την αξιολόγηση. Επιλέξτε Διαχείριση για να ρυθμίσετε το προφίλ που εκτελεί τις δοκιμές.

Επεξεργασία συνομιλιών σε ένα σύνολο δοκιμών

Για να επεξεργαστείτε συνομιλίες σε ένα δοκιμαστικό σύνολο:

  1. Στην καρτέλα Αξιολόγηση, ανοίξτε ένα υπάρχον σύνολο δοκιμών από το αναπτυσσόμενο μενού Αξιολόγηση.
  2. Επιλέξτε μια συνομιλία για να επεξεργαστείτε τα μηνύματά της.
  3. Χρησιμοποιήστε το αναπτυσσόμενο μενού Προσθήκη συνομιλιών για να προσθέσετε περισσότερες συνομιλίες.
  4. Επιλέξτε Αποθήκευση όταν είστε έτοιμοι.