分析试验
实验结果显示在实验详细信息和记分卡页面中。 记分卡以正常节奏生成。 第一个记分卡在 12 小时后生成,在试验过程中每 24 小时生成一次记分卡。
实验详细信息和记分卡页面列出了实验名称、说明、开始和结束日期、预期持续时间、受众和变体计数。 页面上提供"停止、运行、克隆为草稿"等操作,这些操作将基于实验状态。
浏览完成后,选择" 已完成 选项卡"视图,然后根据实验名称选择查看 记分卡,以及实验详细信息。 此外,可以通过选择实验名称查看运行中用户记分卡和详细信息。
注意
若要深入了解 SRM 以及如何解决此问题,请参阅示例比率不匹配部分,内容详见实验最佳做法和建议内。
在试验运行中:
- 生成玩家计数、平均值、增量、统计意义、P 值、P 移动和维卡德偏差指标
- 如果识别出示例比率不匹配 (SRM) 问题,则它将被标记为用户以便调查。
- SRM 指示对随机结果的偏好抽样,这会导致解决 bug 的选项(如果有),基于估计的影响立即停止试验或承担风险,让试验继续进行。
完成试验后:
- 每个指标的总体统计计算可用于分析。
有关变体、其关联变量和替代的详细信息,请选择 Configuration ,然后选择 试验配置页面,该页面将显示详细信息。