使用分析来了解您的智能体的表现如何,并确定需要改进的领域。
Copilot Studio 中的分析页面为您展示智能体的全面数据,从关键指标概览到智能体组件的深入使用分析。 您可以向下钻取每条数据来获取更多详细信息。
分析适用于所有地区。 分析数据最长可保留 360 天。 最近 28 天的会话详细信息和对话记录信息可供查看。 分析中的时间戳和日期戳均采用协调世界时 (UTC)。 日期和时间戳包括当天开始和结束时间、会话时间,以及智能体数据中的任何其他时间标记。
备注
分析页面不会显示您在 Copilot Studio 中使用测试面板测试智能体时所执行的操作的分析数据。
授予分析数据的有限只读访问权限
如果您是智能体所有者,且仅希望授予他人访问智能体的分析页面的权限,可以通过启用分析查看者共享角色来共享智能体。 如果您希望共享智能体的对象能够访问对话记录中的信息,他们还必须拥有机器人记录查看者安全角色。
了解有关共享智能体分析数据的更多信息。
重要提示
作为智能体的所有者,您只能将“分析”查看者角色授予个人,而不能授予用户组。
要访问您所负责的智能体的分析页面:
- 在 Copilot Studio 中打开您的智能体。
- 在顶部菜单栏中选择分析。
总结
摘要区域利用 Copilot 生成关于智能体的关键 Analytics Insights 的 AI 摘要。 选择查看更多以查看完整的洞察汇总列表。
它通过为所选报告期间的常见主题和指标生成项目符号列表摘要,帮助您快速了解这些内容并识别智能体的改进领域。 其中可能包括互动指标、客户情绪与反馈,以及自上一报告期以来的趋势。
客户评论摘要(预览版)可帮助您了解有关该智能体的总体客户情绪,例如反馈和评论。 洞察内容的优先级基于相关评论的数量及其整体重要性进行排序。 价值较低或不相关的评论会被过滤掉,相关反馈则会被归类汇总。
可以使用好评和差评图标
向 Microsoft 提供有关此部分的反馈。 使用向 Microsoft 提交反馈面板添加注释并共享相关文件。 通过提供这样的描述性反馈,我们可以共同努力,不断改进产品。
- 在向 Microsoft 提交反馈面板上,根据您选择的打开面板的图标,使用自然语言描述您的偏好。
- 选择是否共享提示、生成的响应、相关内容示例和其他日志文件。
- 选择提交。
您还可以在概览区域查看高层次的绩效摘要,然后深入分析其表现。
活动用户
活跃用户指标可反映对话式智能体的采用程度及其随时间的变化趋势。 活跃用户 是指在报告期间至少与对话式智能体互动过一次的唯一用户。 Copilot Studio Analytics 会显示两个预定义时间段的活跃用户数量:日活跃用户 (DAU) 和月活跃用户 (MAU)。 日活跃用户统计以 UTC 时区为基准,按完整 24 小时为周期进行计算。 月活跃用户统计遵循日历月,同样以 UTC 时区为基准,从当月第一天开始,到最后一天结束。
重要提示
只有当您在设置>安全>身份验证中将智能体设置为需要身份验证时,活跃用户指标 功能才受支持。
所选时段的平均 DAU 及其与上一时段的百分比变化,将作为关键绩效指标 (KPI) 显示在概览部分中。
备注
平均日活跃用户(DAU)指标的计算公式为:(sum of all full-day active user counts in the period) / (count of full days in the period)。
要查看每日和每月活跃用户数量随时间变化的趋势详情,请点击概览面板右上角的查看活跃用户按钮。
仅对话会话
Copilot Studio 中的对话式智能体分析会跟踪用户与智能体的互动情况,并尝试捕获您的智能体处理用户任务的情况。
对话分析使用以下概念和术语:
对话是指特定用户或用户组在渠道上与您的智能体代表之间进行的持续互动。
对话可以暂停并在稍后恢复,也可以转接给客户服务代表。 对话可能是单向的,即从客户到智能体,或从智能体到客户,但更常见的是客户与智能体之间的往来互动。
对话将在 30 分钟不活动后超时。
对于已发布到语音通话渠道的智能体,对话将在结束对话事件发生后 3 分钟超时。
一个对话可以包含一个或多个分析会话。
经典模式下的分析会话与用户触发的最后一个自定义主题相关联。 如果会话中不包含自定义主题,则该主题即为用户直接触发的最后一个系统主题。
仅事件触发器会话
自治智能体是具有事件触发器的智能体。 这些智能体仅支持带触发器的智能体分析。
针对带有触发器的智能体的分析会话会跟踪智能体从接收触发器的有效载荷到执行响应操作的整个过程。 这些分析会话可以捕捉到智能体的响应内容以及智能体的表现。
备注
如果触发器失败,智能体未收到触发器有效负载,分析会话无法开始。 分析功能仅跟踪成功触发的运行。
混合视图 - 对话和事件触发会话
当您的智能体数据包含报告周期内至少一次对话会话和至少一次基于触发器的运行时,分析页面将显示对话会话和自主会话相关指标的混合视图。 在此视图中,概览和有效性部分并排显示了对话会话和事件触发会话的指标。 使用情况部分允许您在对话或运行之间进行选择,仅显示相关数据。 选择全部将显示所有与使用情况相关的数据。 满意度部分显示对话会话的满意度指标。
有关以下内容的更多信息:
有关显示的与对话会话相关的指标,请参阅分析对话型智能体的有效性。
显示的与事件触发会话相关的指标,请参阅分析自主智能体运行状况。
下载对话记录
对话超时后几分钟,您即可下载对话记录。您可以下载过去 29 天内的任意时间段的数据。 您可以在 Dataverse 中通过 Power Apps 门户下载,也可以通过 Copilot Studio 应用以会话聊天记录的形式下载。 在分析会话结束后,可能需要长达一个小时的时间,相关数据才会显示在分析控制面板上。
备注
您无法在 Teams 中的 Copilot Studio 应用上从 Dataverse 下载对话记录。 要在 Dataverse 中查看和导出记录,您需要注册 Copilot Studio Web 应用。 您可以通过 Copilot Studio 应用下载会话聊天记录。 有关详细信息,请参阅下载代理会话脚本。
主题使用分析
在 Copilot Studio 中,主题定义了智能体对话的进展方式,代表用户与智能体之间对话的一部分。 主题分析窗格显示了单个主题的性能情况,包括其被触发的频率、包含该主题的会话的解决情况,以及用户对这些会话的满意度。 您可以利用这些洞察来识别频繁升级或被放弃的话题,然后优先对其进行改进。 要了解有关话题及其创建方法的更多信息,请参阅创建和编辑话题。
要查看主题分析面板:
在 Copilot Studio 中导航至智能体的主题页面。
选择您要分析的话题。 如果没有可用的话题,请参阅创建和编辑话题。
在“话题”页面的右上角,选择更多 (...) >分析。
主题分析面板显示:
-
主题结果:一张图表,展示在触发该主题的会话中,会话结果、
Escalated、Resolved和Abandoned的情况。 使用此图表可快速评估主题的健康状况。 如果Escalated或Abandoned的结果占比很高,可能意味着该主题需要改进。 - 主题总使用量:显示该主题结果随时间变化的趋势图表。 利用此功能可检测回归问题,例如在编辑主题后“放弃会话”数量的激增,或确认近期更改是否提升了解决率。
- 客户满意度评分:根据与该主题相关的会话中用户调查反馈得出的评分。
- 满意度评分趋势:显示满意度评分随时间变化的图表。 利用此趋势识别用户情绪下降或改善的时段。
要更改时间范围,请选择主题分析面板顶部的“时间范围”下拉菜单。