Effectuez des tests et consultez les résultats

[Cet article fait partie de la documentation en version préliminaire et peut faire l’objet de modifications.]

En utilisant les résultats du test set, vous pouvez optimiser le comportement de votre agent et valider qu’il répond à vos exigences commerciales et de qualité. Vous pouvez aussi lancer plusieurs tests pour comparer les résultats au fur et à mesure que vous améliorez votre agent.

Les résultats des tests sont disponibles dans le Copilot Studio pendant 89 jours. Pour sauvegarder vos résultats de test plus longtemps, exportez les résultats dans un fichier CSV.

Important

Cet article contient la documentation sur Microsoft Copilot Studio en version préliminaire et peut faire l’objet de modifications.

Les fonctionnalités en préversion ne sont pas destinées à une utilisation en production et peuvent avoir des fonctionnalités restreintes. Ces fonctionnalités sont disponibles avant une publication officielle afin que vous puissiez y accéder en avant-première et fournir des commentaires.

Si vous créez un assistant prêt pour la production, consultez Vue d’ensemble de Microsoft Copilot Studio.

Exécuter un jeu de tests

Après avoir créé un ensemble de test, vous pouvez l’exécuter ou le relancer pour comparer les résultats au fil du temps et des itérations. Un test peut prendre jusqu’à quelques minutes. Vous pouvez faire un test à la fois.

Important

Les évaluations d’agents utilisant l’authentification utilisateur nécessitent un accès via le connecteur Microsoft Copilot Studio. Si votre administrateur coupe cette connexion, vous ne pouvez pas lancer de tests en utilisant l’outil d’évaluation. Pour plus d’informations, voir connecteurs et groupes de données Copilot Studio.

1. Rendez-vous sur la page d’évaluation de votre agent.

2. Effectuez un test en effectuant l’une des actions suivantes :

   • À la fin de la création ou de l’édition d’un ensemble de test, sélectionnez Évaluer.
   • Dans la section Résultats récents , vous pouvez évaluer les résultats des tests en procédant à l’une des étapes suivantes :
     • Passez la souris sur le résultat du test que vous souhaitez évaluer, sélectionnez les trois points (...) puis sélectionnez à nouveau Évaluer l’ensemble de tests.
     • Sélectionnez le résultat du test pour l’ouvrir, puis sélectionnez les trois points (...) dans le panneau résumé d’évaluation , puis sélectionnez à nouveau Évaluer l’ensemble de test.

   Si le profil utilisateur de l’ensemble de test a des connexions cassées, ou si l’ensemble de test n’a pas de profil utilisateur, la fenêtre de dialogue Gérer les connexions apparaît. Vous n’êtes pas obligé d’utiliser un profil utilisateur pour les tests. Cependant, si vous utilisez un profil, toutes les connexions doivent fonctionner. Pour des informations sur la réparation des connexions, voir Gérer les profils et connexions utilisateurs.

Une évaluation peut prendre quelques minutes à être réalisée. Une alerte apparaît dans Copilot Studio lorsque les résultats du test sont prêts à être consultés.

Plongez dans les résultats des tests

Chaque fois que vous exécutez une évaluation avec un jeu de tests, Copilot Studio effectue les opérations suivantes :

1. Il utilise le compte d’utilisateur connecté pour simuler des conversations avec l’assistant, en envoyant chaque question de l’incident de test à l’assistant.

2. Il collecte les réponses de l’assistant.

3. Mesure et analyse le succès de chaque réponse. Chaque incident de test reçoit un score Réussite ou Échec, en fonction des critères de l’incident de test.

4. Affecte un score de taux de réussite en fonction du taux de réussite et / du jeu de tests.

Vous pouvez voir le taux de réussite de chaque ensemble de tests effectués sur la page d’évaluation de votre agent, sous Résultats récents. Sélectionnez Afficher tout pour afficher plus d’exécutions de jeux de test.

Voir une analyse détaillée pour un cas test

Lorsque vous ouvrez un résultat de test, vous pouvez voir les détails de la course, une liste des requêtes utilisées dans le test, la réponse de l’agent, ainsi que le score Réussi ou Échoué .

Sélectionnez un cas test dans la liste pour voir une évaluation détaillée de chaque réponse.

L’évaluation inclut les réponses attendues et réelles, le raisonnement du résultat du test, ainsi que les connaissances, sujets et outils utilisés par l’agent pour répondre.

Sélectionnez un savoir ou un sujet cité pour l’ouvrir.

Comparer les résultats des tests

Vous voulez tester une version de votre agent et voir des changements de performance avant et après avoir effectué les modifications. Vous pouvez comparer deux exécutions du même ensemble de tests en utilisant l’outil Comparaison avec .

Pour faire une comparaison, il faut exécuter au moins deux fois le même ensemble de tests.

1. Dans la page d’évaluation de votre agent, ouvrez la série d’essai que vous souhaitez utiliser comme base pour la comparaison, sous Résultats récents des tests.

2. Sélectionnez le menu déroulant Comparer avec , puis sélectionnez l’heure et la date du test que vous souhaitez comparer avec les résultats du test actuellement ouverts.

Dans la liste des cas test , les flèches indiquent quels résultats de cas test se sont améliorés en passant d’échec à réussi , ou ont diminué en passant de réussi à échec .

Sélectionnez un cas test pour voir plus de détails. Dans le panneau résumé d’évaluation , vous pouvez voir une comparaison directe des résultats des tests, avec le résultat du test en cours en haut.

Exporter les résultats des tests

Vous pouvez exporter les résultats des tests vers un fichier CSV. Le fichier liste la question, la réponse attendue (le cas échéant), la méthode de test, le score de réussite (si applicable), la réponse de l’agent, le résultat du test et l’analyse pour chaque cas de test.

1. Rendez-vous sur la page d’évaluation de votre agent.
2. Dans la section Résultats récents , vous pouvez exporter un résultat de test en procédant à l’une des étapes suivantes :
   • Passez la souris sur le cas de test que vous souhaitez exporter, sélectionnez les trois points (...) puis sélectionnez Exporter les résultats du test.
   • Sélectionnez le cas de test pour l’ouvrir, puis sélectionnez les trois points (...) dans le volet résumé d’évaluation , puis sélectionnez Exporter les résultats du test.

Les résultats du test se téléchargent comme nom de votre ensemble de test.csv.