Décrire comment surveiller l’utilisation et l’adoption de l’agent Copilot Studio
Le déploiement d’un agent est le début d’un cycle continu de surveillance, d’apprentissage et d’amélioration. Copilot Studio fournit des analyses intégrées qui donnent aux créateurs et aux administrateurs une visibilité sur la façon dont les agents sont utilisés, les conversations qui réussissent ou échouent et où l’engagement augmente ou diminue.
Tableau de bord d’analytique Copilot Studio
Chaque agent de Copilot Studio dispose d'une page d'analytique dédiée accessible à partir de l'interface de création de l'agent.
La page d’analyse organise les métriques entre plusieurs vues.
Overview
La page Vue d’ensemble présente les indicateurs de performances clés qui résument l’intégrité de l’agent en un clin d’œil :
- Nombre total de sessions : nombre de sessions de conversation distinctes gérées par l’agent pendant la période sélectionnée.
- Taux d’engagement : pourcentage de sessions où l’agent a fourni au moins une réponse de fond, indiquant que les utilisateurs se sont activement engagés au-delà d’un message d’accueil.
- Taux de résolution : pourcentage de sessions où le besoin de l’utilisateur a été résolu sans escalade ni questions répétées.
- Taux d’escalade : pourcentage de sessions transmises à un agent humain ou transférées selon un processus d’escalade défini.
- Taux d’abandon : pourcentage de sessions où l’utilisateur a cessé d’interagir avant la résolution de sa question.
Analyse des rubriques
La page Rubriques indique les rubriques déclenchées le plus fréquemment, qui ont des taux élevés d’abandon ou d’escalade, et qui fonctionnent correctement. Les créateurs utilisent l’analytique des rubriques pour identifier les lacunes dans la couverture des conversations et pour hiérarchiser les sujets à affiner ou développer.
Satisfaction du client
Si l’agent est configuré avec une enquête de satisfaction à la fin des conversations, la page Satisfaction client (CSAT) affiche les scores et tendances de satisfaction agrégés. Les créateurs peuvent examiner en détail les sessions ayant obtenu un faible score pour consulter les transcriptions et comprendre ce qui s’est mal passé.
Utilisateurs actifs
La page Utilisateurs actifs suit les utilisateurs uniques qui interagissent avec l’agent, affichant les utilisateurs actifs quotidiens (DAU) et les utilisateurs actifs mensuels (MAU). Les lignes de tendance aident les décideurs à comprendre si l’adoption est en croissance, stable ou en déclin. Les métriques utilisateur actives nécessitent que l’agent soit configuré avec l’authentification Microsoft Entra ID.
Métriques personnalisées
Copilot Studio prend en charge les métriques personnalisées que les fabricants définissent à l’aide du langage naturel. En décrivant un résultat métier à suivre ( par exemple, la fréquence à laquelle les utilisateurs ont demandé l’escalade vers un spécialiste), Copilot Studio génère une métrique calculée à partir des transcriptions de conversation et l’affiche sous forme de visualisation sur la page d’analyse.
Inventaire de l’agent dans le kit Copilot Studio
Le kit Copilot Studio, disponible en tant que solution installée séparément, fournit une fonctionnalité d’inventaire des agents qui offre aux administrateurs une visibilité à l’échelle du locataire sur tous les agents Copilot Studio dans tous les environnements. L’inventaire inclut des métadonnées telles que la date de création et l’état de publication, les données d’utilisation des fonctionnalités indiquant si chaque agent utilise des sources de connaissances ou une orchestration générative, des chronologies de croissance de l’agent et une répartition de l’adoption des fonctionnalités IA dans le portefeuille d’agents du locataire.