Condividi tramite


Modifica i dettagli di un set di test

Usa set di test per valutare e affinare come il tuo agente gestisce scenari di risposta reali. Questo articolo spiega come modificare il nome e le impostazioni di un set di test, gestire il profilo utente e le connessioni utilizzate per l'autenticazione, modificare o eliminare singoli casi di test e rimuovere interi set o risultati di test. Questi passaggi ti aiutano a garantire che le valutazioni riflettano i contesti utente corretti e a mantenere un accesso sicuro a fonti di conoscenza e strumenti.

È possibile scegliere tre metodi di test, detti anche classificatori, per valutare le risposte dell'agente: qualità, somiglianza e corrispondenza del testo. Per altre informazioni sui diversi metodi di test, vedi Metodi di test.

Modifica i dettagli di un set di test

Puoi modificare i dettagli di un set di test, come quale account utilizza per l'autenticazione e i metodi di test utilizzati.

  1. Vai alla pagina Valutazione del tuo agente.

    Screenshot che mostra come selezionare la scheda Valutazione quando la selezione delle schede è compressa a causa della dimensione dello schermo.

  2. Seleziona il set di test.

  3. Nel set di test seleziona il test case da modificare.

  4. Opzionalmente, cambia il nome del set di test.

  5. Aggiungi o modifica i metodi di test. Ogni metodo di prova misura valori diversi e richiede configurazioni differenti. Per imparare come impostare ogni metodo di test, consulta Scegli metodi di test.

    Metodo di test Misure Tipo di set di test Punteggio Configurations
    Qualità generale Qual è la qualità delle risposte di un test case in base a qualità specifiche Risposta singola o conversazione Valutato su una scala del 100% None
    Confronta il significato Quanto bene corrisponde il significato della risposta del caso di prova a quella attesa Risposta singola Valutato su una scala del 100% Punteggio di superamento, risposta prevista
    Utilizzo delle capacità Indica se il test case ha usato tutte o alcune delle risorse previste. Risposta singola Superato/non superato Capacità attese
    Corrispondenza delle parole chiave Se il caso di prova utilizzasse tutte o una delle parole chiave o frasi attese Risposta singola o conversazione Superato/non superato Parole chiave o frasi attese
    Somiglianza del testo Quanto corrisponde il testo della risposta del caso di prova con la risposta attesa Risposta singola Valutato su una scala del 100% Punteggio di superamento, risposta prevista
    Corrispondenza esatta Se la risposta del caso di prova corrisponde esattamente a quella attesa Risposta singola Superato/non superato Risposta attesa
  6. Selezionare Gestisci profilo per aggiungere un account oppure selezionare il profilo corrente per gestire le connessioni o scegliere un profilo diverso. Il test automatizzato utilizza l'autenticazione dell'account di test selezionato. Solo la valutazione multi-profilo è supportata per agenti senza dipendenze dai connettori. Se il tuo agente dispone di fonti di conoscenza o strumenti che richiedono un'autenticazione specifica, puoi selezionare l'account appropriato per il test. Per altre informazioni, vedere Gestire profili utente e connessioni.

Annotazioni

Quando Copilot Studio genera test case o esegue una valutazione, usa le credenziali di autenticazione di un account connesso per accedere alle origini e agli strumenti di conoscenza dell'agente. I risultati del test case possono includere informazioni riservate a cui l'account connesso può accedere e tutti gli autori che possono accedere ai risultati del test possono visualizzare queste informazioni.

Screenshot che mostra il pulsante Gestisci profilo.

Gestire profili utente e connessioni

Puoi eseguire set di test usando l'autenticazione dell'account di un utente. Questo metodo di autenticazione permette al tuo agente di accedere alle fonti di conoscenza e agli strumenti necessari per raggiungere i suoi obiettivi.

È possibile usare i profili per simulare esperienze utente specifiche. Ad esempio, il profilo utente di un direttore può accedere a fonti di conoscenza diverse rispetto a quello di uno stagista, e l'agente restituisce risultati diversi. Solo la valutazione multi-profilo è supportata per agenti senza dipendenze dai connettori.

Importante

I profili utente nei set di test non possono fornire l'autenticazione per gli strumenti. Quando si esegue una valutazione, l'agente deve usare l'account con cui si è effettuato l'accesso per autenticare le connessioni degli strumenti. Se si seleziona un profilo utente diverso o le connessioni dello strumento dell'agente non usano l'account per l'autenticazione, la valutazione ha esito negativo e viene visualizzato il messaggio "Impossibile connettersi agli strumenti". Per risolvere il problema, accedere con l'account configurato con i connettori degli strumenti e quindi eseguire una valutazione.

I risultati dei test mostrano quale profilo utente è stato utilizzato.

Annotazioni

Quando Copilot Studio genera test case o esegue una valutazione, usa le credenziali di autenticazione di un account connesso per accedere alle origini e agli strumenti di conoscenza dell'agente. I casi di test generati o i risultati possono includere informazioni sensibili a cui l'account collegato può accedere, e tutti i creatori che possono accedere ai risultati possono vedere queste informazioni.

Le valutazioni dell'agente che usano l'autenticazione utente richiedono l'accesso tramite il connettore Microsoft Copilot Studio. Se il tuo amministratore disattiva questa connessione, non puoi eseguire test usando lo strumento di valutazione. Per altre informazioni, vedere connettori e gruppi di dati di Copilot Studio.

Per aggiungere o modificare un profilo utente in un set di test:

  1. Apri un set di test, poi seleziona Gestisci profilo.

    Screenshot che mostra il pulsante Gestisci profilo.

  2. Seleziona il menu a tendina Utente, poi:

    • Seleziona l'account utente che vuoi usare, oppure
    • Seleziona Aggiungi un account, poi accedi all'account.

    Screenshot che mostra come selezionare un account utente.

  3. Per le connessioni con un avviso, seleziona la connessione. Cambia la connessione esistente in una funzionante, seleziona Riconnetti per provare a ristabilire la connessione esistente, oppure Crea nuova connessione per provare una nuova connessione.

  4. Per le nuove connessioni, inserisci i dettagli richiesti, poi seleziona Connetti.

  5. Quando tutte le connessioni funzionano, seleziona Salva.

Elimina un set di test o un risultato di test

Puoi cancellare un caso di test o un set di test che non ti serve più.

  1. Vai alla pagina Valutazione del tuo agente.
  2. Nella sezione Test set , elimina un test set seguendo uno dei seguenti passaggi:
    • Seleziona i tre punti (...) sulla scheda del set di test, poi seleziona Elimina.
    • Seleziona il set di test per aprirlo, poi seleziona i tre punti (...) nel pannello Configura set di test , e infine seleziona Elimina.
  3. Nella sezione Risultati recenti , elimina un risultato di test seguendo uno dei seguenti passaggi:
    • Passa il mouse sopra il risultato del test che vuoi eliminare, seleziona i tre punti (...) e poi seleziona Elimina test.
    • Seleziona il risultato del test per aprirlo, poi seleziona i tre punti (...) nel pannello riepilogo della Valutazione , e infine seleziona Elimina.