Modifier un ensemble de tests

[Cet article fait partie de la documentation en version préliminaire et peut faire l’objet de modifications.]

Pendant ou après la création d’un ensemble de tests, vous pouvez modifier les cas de test en modifiant la formulation des questions, en choisissant différentes méthodes de test ou en modifiant les réponses attendues selon les besoins. Vous pouvez sélectionner plusieurs incidents de test pour les modifier en bloc en sélectionnant les cases à cocher en regard de chaque incident de test.

Vous avez le choix entre trois méthodes de test, également appelées évaluateurs, pour évaluer les réponses de l’assistant : qualité, similarité, correspondance de texte. Pour plus d’informations sur les différentes méthodes de test, consultez Méthodes de test.

Important

Cet article contient la documentation sur Microsoft Copilot Studio en version préliminaire et peut faire l’objet de modifications.

Les fonctionnalités en préversion ne sont pas destinées à une utilisation en production et peuvent avoir des fonctionnalités restreintes. Ces fonctionnalités sont disponibles avant une publication officielle afin que vous puissiez y accéder en avant-première et fournir des commentaires.

Si vous créez un assistant prêt pour la production, consultez Vue d’ensemble de Microsoft Copilot Studio.

Modifier les détails d’un ensemble de test

Vous pouvez modifier les détails de base d’un ensemble de test et le compte qu’il utilise pour l’authentification.

1. Dans la page d’évaluation de votre agent, sélectionnez l’ensemble de test.

2. Dans le jeu de tests, sélectionnez l’incident de test que vous souhaitez modifier.

3. En option, changez le nom de l’ensemble de test.

4. Sélectionnez Gérer le profil pour ajouter un compte, ou sélectionnez le profil actuel pour gérer les connexions ou choisissez un autre profil. Les tests automatisés utilisent l’authentification du compte de test sélectionné. Si votre agent dispose de sources de connaissances ou d’outils nécessitant une authentification spécifique, vous pouvez sélectionner le compte approprié pour vos tests.

Note

Lorsque Copilot Studio génère des cas de test ou effectue une évaluation, il utilise les identifiants d’authentification d’un compte connecté pour accéder aux sources de connaissances et outils de votre agent. Les cas de test ou résultats générés peuvent inclure des informations sensibles auxquelles le compte connecté a accès, et ces informations sont visibles pour tous les créateurs pouvant accéder à l’ensemble de test.

Gérer les profils et connexions utilisateurs

Vous pouvez lancer des ensembles de tests en utilisant l’authentification du compte d’un utilisateur. Cette méthode d’authentification permet à votre agent d’accéder aux sources de connaissances et aux outils nécessaires pour atteindre ses objectifs.

Vous pouvez aussi utiliser des profils pour simuler des expériences utilisateur spécifiques. Par exemple, le profil utilisateur d’un directeur peut accéder à des sources de connaissances différentes de celles d’un stagiaire, et l’agent doit fournir des résultats différents.

Les résultats des tests montrent quel profil utilisateur a été utilisé.

Note

Lorsque Copilot Studio génère des cas de test ou effectue une évaluation, il utilise les identifiants d’authentification d’un compte connecté pour accéder aux sources de connaissances et outils de votre agent. Les cas de test ou résultats générés peuvent inclure des informations sensibles auxquelles le compte connecté a accès, et ces informations sont visibles pour tous les créateurs pouvant accéder à l’ensemble de test.

Les évaluations d’agents utilisant l’authentification utilisateur nécessitent un accès via le connecteur Microsoft Copilot Studio. Si votre administrateur coupe cette connexion, vous ne pouvez pas lancer de tests en utilisant l’outil d’évaluation. Pour plus d’informations, voir connecteurs et groupes de données Copilot Studio.

Pour ajouter ou modifier un profil utilisateur dans un ensemble de test :

1. Ouvrez un ensemble de tests, puis sélectionnez Gérer le profil.

1. Sélectionnez le menu déroulant Utilisateur , puis :

• Sélectionnez le compte utilisateur que vous souhaitez utiliser, ou
• Sélectionnez Ajouter un compte, puis connectez-vous au compte.

1. Pour les connexions avec un avertissement, sélectionnez la connexion. Changez la connexion existante pour une connexion fonctionnelle, sélectionnez Reconnecter pour essayer de rétablir la connexion existante, ou sélectionnez Créer une nouvelle connexion pour essayer une nouvelle connexion.

Pour les nouvelles connexions, saisissez les détails demandés, puis sélectionnez Connecter.

1. Lorsque toutes les connexions fonctionnent, sélectionnez Enregistrer.

Modifier les cas de test au sein d’un ensemble de tests

1. Dans la page d’évaluation de votre agent, sélectionnez l’ensemble de test.

2. Dans le jeu de tests, sélectionnez l’incident de test que vous souhaitez modifier.

1. Dans le volet droit, modifiez la formulation d’une question en modifiant le texte dans le champ Question.

1. Sélectionnez la méthode de test à utiliser.

• Qualité :

  • Sélectionnez Qualité générale pour évaluer la réponse en fonction de sa pertinence, de sa justesse et de son exhaustivité.

  • Sélectionnez Comparer le sens pour évaluer dans quelle mesure la réponse reflète le sens de la réponse attendue. Sous Score de réussite, vous pouvez définir le seuil qui permettra de déterminer ce qui constitue un score suffisant pour qu’une réponse soit considérée comme correcte.

    Dans la zone Réponse attendue, indiquez la réponse sur laquelle la méthode de test doit se baser pour évaluer la réponse de l’assistant.

• Similarité : utilise une métrique de similarité cosinus pour évaluer la façon dont la réponse de l’agent est la formulation et la signification de la réponse attendue. Cela détermine un score compris entre 0 et 1, 1 indiquant que la réponse correspond étroitement et 0 qu’elle ne correspond pas du tout. Sous Score de réussite, vous pouvez définir le seuil qui permettra de déterminer ce qui constitue un score suffisant pour qu’une réponse soit considérée comme correcte.

  Dans la zone Réponse attendue, indiquez la réponse sur laquelle la méthode de test doit se baser pour évaluer la réponse de l’assistant.

• Correspondance de texte :

  • Sélectionnez Correspondance exacte pour évaluer la réponse de l’assistant par rapport à la réponse attendue, où un score de réussite signifie que la réponse de l’assistant correspond exactement à la réponse attendue qui a été définie.

    Dans la zone Réponse attendue, indiquez la réponse sur laquelle la méthode de test doit se baser pour évaluer la réponse de l’assistant.

  • Sélectionnez Correspondance partielle pour évaluer la réponse de l’assistant par rapport à la réponse attendue, où un score de réussite signifie que la réponse de l’assistant contenait certains mots ou expressions contenu(e)s dans la réponse attendue définie.

    Dans la zone Réponse attendue, fournissez une expression ou un mot-clé sur lequel/laquelle la méthode de test devra se baser afin d’évaluer la réponse de l’assistant. Pour ajouter plusieurs mots clés ou expressions, sélectionnez Ajouter, sélectionnez l’opérateur etou entre les zones et fournissez le mot clé ou l’expression.

    

1. Sélectionnez Appliquer.

2. Une fois vos modifications terminées, sélectionnez Enregistrer pour enregistrer votre ensemble de tests ou Évaluer pour lancer le test.

Ajouter plus de cas de test à un ensemble de tests

Lors de la création ou de l’édition d’un ensemble de test, vous pouvez ajouter d’autres cas de test.

1. Dans la page d’évaluation de votre agent, sélectionnez l’ensemble de test.

2. Générez ou ajoutez manuellement d’autres cas de test.

1. Sélectionnez et modifiez tout nouveau cas de test pour ajouter des détails.

Supprimer un cas de test ou un ensemble de tests

Vous pouvez supprimer un cas de test ou un ensemble de tests dont vous n’avez plus besoin.

1. Rendez-vous sur la page d’évaluation de votre agent.
2. Dans la section ensembles de test , vous pouvez supprimer un ensemble de tests en procédant à l’une des étapes suivantes :
   • Sélectionnez les trois points (...) de la carte du jeu de test, puis sélectionnez Supprimer.
   • Sélectionnez le set de test pour l’ouvrir, puis sélectionnez les trois points (...) dans le panneau Configurer le set de test , puis sélectionnez Supprimer.
3. Dans la section Résultats récents , vous pouvez supprimer un cas de test en procédant à l’une des étapes suivantes :
   • Passez la souris au-dessus du cas de test que vous souhaitez supprimer, sélectionnez les trois points (...) puis sélectionnez Supprimer le test.
   • Sélectionnez le cas de test pour l’ouvrir, puis sélectionnez les trois points (...) dans le panneau résumé d’évaluation , puis sélectionnez Supprimer.