分析助手的客户满意度指标

重要提示

继在生成式人工智能的重大投资和跨 Microsoft Copilot 的增强集成之后，Power Virtual Agents 功能和特性现已成为 Microsoft Copilot Studio 的一部分。

在我们更新文档和培训内容时，一些文章和截图可能会参考 Power Virtual Agents。

分析页面的客户满意度选项卡提供了客户满意度 (CSAT) 调查数据的详细视图，包括平均 CSAT 分数、主要用户查询主题以及对您的助手回答满意或不满意的动机因素的可行见解。

默认情况下，此页显示最近七天的关键绩效指标。 要更改时间段，请使用页面顶部的日期选择器。 您可以检索最近 45 天内任何时间段的数据。

客户满意度分数

客户满意度评分图表以图形方式显示了客户响应对话结束请求，以参加调查的会话的平均 CSAT 分数。 CSAT 调查要求客户对其体验按 1 到 5 的范围进行评分。 如果最终用户在同一会话中回答了多个调查，则仅使用最新的调查。

此图表还提供一个不同时期的变化指标。 例如，当您选择三天期间时，指示器会显示相对于所选时期前三天的百分比变化。 请注意，只有当您的助手拥有前一时期的 CSAT 调查数据时，才会显示相邻两个时期的指示器。 如果相对于在过滤器中选择的时间段，在相同的试用期内没有可用的 CSAT 调查数据，则不会显示相邻两个时期的指示器。

CSAT 调查响应率

CSAT 调查回复率图表显示了提交的对话结束 CSAT 调查的数量以及完成调查的百分比。

客户满意度分解

客户满意度细分显示了在所选时间段内满意、不满意或中立的会话的百分比。 客户满意度状态窗格提供了用于确定会话满意度状态的各种信号的更多详细信息。

客户满意度状态

客户满意度状态图表提供了针对用户所搜索主题的关键见解，以及用户对助手回复的满意度。 具有相似主题的会话被分为一组。 该图表显示了所选期间每个主题的会话数量，以及满意或不满意会话的百分比。 既非满意也非不满意的会话被视为中立会话，不会出现在此图表中。

给定会话的主题是使用 ML 模型派生的。 在发送到分析仪表板之前，主题将经过处理，以删除任何个人身份信息 (PII) 或敏感信息，如电话号码。 此外，如果主题包含亵渎或有害的语言，这些主题将被屏蔽。

将鼠标悬停在图表的每个部分上，查看具体的满意度或不满意度驱动因素。 如果给定会话的任何标准为真，则该会话被分类为满意或不满意：

• 如果满足以下条件，会话将被视为不满意：

  • 在对话结束调查中，用户给出了两星或更低的评价。
  • 在（系统回退主题）中，用户需要两次或两次以上重新表述其查询。
  • 用户放弃了会话。
  • 用户将会话升级到人工代理。
  • 用户关于他们与助手的对话的总体情绪被分类为消极。 使用为情绪分析而微调的公开可用 ML 模型来确定情绪。

• 如果满足以下条件，会话将被视为满意：

  • 在对话结束调查中，用户给出了四颗星或更高的分数。
  • 在（系统回退主题）中，用户无需多次重新表述他们的查询。
  • 会话已解决。
  • 用户关于他们与助手的对话的总体情绪被分类为积极。

不符合上述任何标准的会话被视为中性会话，不会出现在此图表中。

在分析页面的摘要选项卡上，您可以使用信息图标了解有关参与、升级、放弃和解决率的更多信息。

主题和会话情绪提取

Copilot Studio使用自然语言处理 (NLP) 技术提取主题并为给定的助手会话分配情绪。

对于每个会话，Copilot Studio 从第一个用户话语中提取主题。 主题相似的单个会话将汇总在一起，并在客户满意度状态图表中显示为一个项目。

为了评估会话情绪，在公共英语数据集上训练底层 NLP 模型。 这包括分析会话文本以确定整体情绪是积极、消极还是中立，以及预处理用户查询以消除误报。 例如，这种预处理确保诸如“什么是最佳选项？”不会仅仅因为“最佳”一词出现在查询中就被归类为积极。