Consultez la liste de développement

L’optimisation d’un agent ne s’arrête pas au lancement. Copilot Studio fournit des analyses riches qui vous aident à comprendre comment les utilisateurs interagissent avec votre agent, où les conversations réussissent ou s’effondrent, et comment l’agent utilise ses outils et ses connaissances. Cet article propose une liste de contrôle structurée et les meilleures pratiques pour vous aider à évaluer et améliorer continuellement votre agent.

Validez votre amélioration et votre préparation à l’analyse

Utilisez ces questions lors des revues régulières, telles que lors des cérémonies de sprint, des optimisations mensuelles ou de la préparation avant la sortie.

Thèmes et motifs d’intention utilisateur

Vous avez terminé ?	Tâche
✓	Examinez-vous des thèmes pour identifier les groupes de questions des utilisateurs et les intentions émergentes ?
✓	Ajoutes-vous des thèmes récurrents à votre catalogue pour de futures améliorations ?

Résultats de la conversation

Vous avez terminé ?	Tâche
✓	Analysez-vous des conversations résolues, escaladés, abandonnées ou non engagées pour trouver des points d’amélioration ?
✓	Veillez-vous à ce que les conversations se terminent sur le sujet de fin de conversation afin que les résultats soient correctement capturés ?
✓	Enquêtez-vous sur les pics dans les sessions abandonnées pour identifier des réponses floues ou des logiques manquantes ?
✓	Vérifiez-vous que les chemins d’escalade ne se déclenchent que lorsque c’est approprié ?

Taux de réponse généré et qualité

Vous avez terminé ?	Tâche
✓	Examinez-vous le taux de réponse généré pour identifier les lacunes dans les connaissances ou les manques de couverture ?
✓	Vérifiez-vous les indicateurs de qualité des réponses tels que la complétude, la stabilité et la pertinence ?
✓	Examinez-vous les réponses de mauvaise qualité et abordez-vous les raisons signalées dans l’analytique ?

Utilisation des outils et des actions

Vous avez terminé ?	Tâche
✓	Surveillez-vous la fréquence d’utilisation des outils et des actions et s’ils réussissent ou échouent ?
✓	Identifiez-vous les outils sous-utilisés ou sujets aux erreurs et décidez-vous de les optimiser ou de les supprimer ?
✓	Validez-vous que les outils utilisés en orchestration générative fonctionnent de manière fiable ?

Performance de la source de connaissances

Vous avez terminé ?	Tâche
✓	Examinez-vous l’utilisation et les taux d’erreur de toutes les sources de connaissances ?
✓	Privilégiez-vous les mises à jour pour les sources de connaissances avec des taux d’erreur élevés ou des résultats incohérents ?
✓	Vérifiez-vous que les bonnes sources de connaissances prennent en charge les scénarios pour lesquels elles sont destinées ?

Satisfaction et retours utilisateurs

Vous avez terminé ?	Tâche
✓	Collectez-vous les opinions des utilisateurs via des sondages « pouce levé/bas » et des sondages CSAT ?
✓	Analysez-vous les tendances de retour pour détecter des réponses floues ou des flux de conversation faibles ?
✓	Ajoutes-vous des schémas d’interaction à faible satisfaction à votre catalogue de refonte ?

Appels de bonnes pratiques

• Considérez l’analytique comme une boucle d’amélioration itérative : Utilisez l’analytique pour provoquer des changements incrémentaux. Utilisez des thèmes, des réponses incomplètes et des schémas d’échec pour éclairer la planification des sprints et prioriser les éléments en retard.
• Concentrez-vous sur la qualité des résultats, pas seulement sur le volume : un système sain maximise les conversations résolues et minimise les escalades et les abandons. Utilisez les ratios de résultats comme indicateur avancé de clarté et d’efficacité.
• Renforcer les sources de connaissances de manière proactive : un taux d’erreur élevé ou des réponses de faible qualité indiquent souvent des sources de connaissances obscures, obsolètes ou mal adaptées. Mettez à jour et restructurez fréquemment ces sources pour un meilleur ancrage.
• Optimisez les outils pour la stabilité et le succès : les appels d’outils peu fiables dégradent la confiance. Suivez les taux de réussite et refactorisez les actions qui échouent fréquemment ou qui retournent des données incohérentes.
• Utilisez les thèmes pour identifier de nouvelles opportunités : Les thèmes mettent en lumière les intentions émergentes. Utilisez-les pour éclairer de nouveaux sujets, sources de connaissances ou besoins d’intégration.
• Assurez-vous que les conversations se terminent proprement : utilisez toujours le sujet Fin de la conversation pour capturer la résolution et le CSAT. Sans ce sujet, les analyses deviennent incomplètes et trompeuses.
• Évaluation distincte des agents autonomes et initiés par l’utilisateur : Les agents autonomes reposent fortement sur les déclencheurs et les chaînes d’outils. Examinez les résultats de la série et les déclencheurs séparément des flux initiés par l’utilisateur.
• Suivez le sentiment dans le temps : Un retour isolé est utile, mais les tendances de sentiment sur plusieurs semaines révèlent des problèmes systémiques. Étudiez les baisses persistantes dès le début.