在合作伙伴中心中管理实验

  • 项目

在合作伙伴中心定义试验并针对试验为应用编码后，便可以准备激活试验，并使用合作伙伴中心查看试验结果。 在获取所需的全部数据后，可以结束你的实验，然后选择是继续使用你的所有应用的控件变体中的变量值还是切换到使用其他变体之一中的变量值。

注意

当激活某个试验时，合作伙伴中心会立即开始从已检测的所有应用中收集数据，从而为你的试验记录数据。 但是，试验数据可能需要几个小时才会显示在合作伙伴中心中。

有关演示如何创建并运行实验的端到端过程的演练，请参阅通过 A/B 测试来创建并运行你的第一个实验。

激活实验

当你对合作伙伴中心试验的参数感到满意并且已更新你的应用代码时，便可以准备激活试验，从而可以开始从你的应用中收集试验数据。 激活该试验时，你的应用可以检索变体值，并向合作伙伴中心报告视图和转换事件。

  1. 登录到合作伙伴中心。
  2. 在“你的应用”下，通过要激活的实验选择该应用。
  3. 在导航窗格中，选择“服务”，然后选择“试验”。
  4. 在“项目”部分的项目表中，展开包含你的试验的项目，然后执行以下操作之一：
  • 为你的试验单击“激活”链接。 你的试验已添加到页面顶部附近的“活动试验”部分。
  • 单击试验名称、滚动到试验页面底部，然后单击“激活”。

重要

激活实验后，不可再对实验参数进行修改，除非在创建实验时，选中了可编辑实验复选框。 在激活实验之前，我们建议你在应用中为实验编码。

查看实验结果

  1. 在开发人员中心中，返回到应用的“试验”页面。
  2. 在“活动试验”部分中，单击活动试验的名称以转到试验页面。
  3. 有关活动实验或已完成的实验，此页中的前两个部分提供了实验的结果：
  • “结果摘要”部分列出了实验目标和每个变体的转换率百分比。
  • “结果详细信息”部分为实验中的所有目标的每个变体提供了更多详细信息，包括视图、转换、独特用户、转换率、增量百分比、置信度和重要性。 置信度是用来计算错误边距的估计的可靠性统计度量。 重要性是基于示例大小的统计度量，用来确定结果不是偶然得出，而是由于特定原因。

注意

合作伙伴中心在 24 小时时间段内仅向每位用户报告第一个转换事件。 如果用户在 24 小时时段内在应用中触发多个转换事件，仅报告第一个转换事件。 这是为了帮助防止触发很多转换事件的单个用户扭曲一组示例用户得出的实验结果。

完成实验

  1. 在合作伙伴中心，返回到试验页。 有关说明，请参阅上一节。
  2. 在“结果摘要”部分中，执行以下操作之一：
  • 如果想要结束试验并继续使用应用的控件变体中的变量值，请单击“继续”。
  • 如果想要结束试验但切换到使用应用的不同变体中的变量值，请在要对其进行切换的变体下单击“切换”。
  1. 单击“确定”以确认你想要结束该实验。