分析试验

实验结果显示在实验详细信息和记分卡页面中。 记分卡以正常节奏生成。 第一个记分卡在 12 小时后生成,在试验过程中每 24 小时生成一次记分卡。

实验详细信息和记分卡页面列出了实验名称、说明、开始和结束日期、预期持续时间、受众和变体计数。 页面上提供"停止、运行、克隆为草稿"等操作,这些操作将基于实验状态。

浏览完成后,选择" 已完成 选项卡"视图,然后根据实验名称选择查看 记分卡,以及实验详细信息。 此外,可以通过选择实验名称查看运行中用户记分卡和详细信息。

注意

若要深入了解 SRM 以及如何解决此问题,请参阅示例比率不匹配部分,内容详见实验最佳做法和建议内。

分析试验分析试验

在试验运行中:

  • 生成玩家计数、平均值、增量、统计意义、P 值、P 移动和维卡德偏差指标
  • 如果识别出示例比率不匹配 (SRM) 问题,则它将被标记为用户以便调查。
    • SRM 指示对随机结果的偏好抽样,这会导致解决 bug 的选项(如果有),基于估计的影响立即停止试验或承担风险,让试验继续进行。

完成试验后:

  • 每个指标的总体统计计算可用于分析。

试验记分卡和详细信息

有关变体、其关联变量和替代的详细信息,请选择 Configuration ,然后选择 试验配置页面,该页面将显示详细信息。

后续步骤