在您 创建项目并 定义合作伙伴中心的远程变量,为应用程序编写试验代码之后,即可在该项目中创建试验。 创建试验时,将定义用户将收到的目标和变体。
有关演示创建和运行试验的端到端过程的演练,请参阅 使用 A/B 测试创建和运行第一个试验。
创建实验
登录到合作伙伴中心。
在 应用下,选择您要创建实验的应用。
在导航窗格中,选择 服务,然后选择 试验。
在 实验 页上,在项目表中找到你想添加实验的项目,然后单击该项目的 添加实验 链接。
在 “试验名称 ”字段中,键入可用于轻松标识试验的名称。 创建试验后,此名称将显示在应用的 试验 页和项目页面上的现有试验列表中。
如果要在试验处于活动状态时编辑试验,请单击“ 可编辑实验 ”复选框。 仅当正在创建试验以通过内部测试验证所有变体时,才选中此框。 有关详细信息,请参阅 创建用于内部测试的试验。
注释
如果要创建一个将发布到客户的试验(即与可供客户使用的应用版本中使用的项目 ID 关联的试验),请不要选中此框。 在试验处于活动状态时编辑试验将使试验结果失效。
在 “项目名称 ”下拉列表中,会自动选择当前项目。 如果要将新试验添加到其他项目,可以在此处选择该项目。 否则,请保持此选择不变。
记下 项目 ID 值。 当你 应用进行试验时,必须在代码中引用此 ID,以便你可以接收变体数据和报表视图和转换事件到合作伙伴中心。
在“视图事件”部分,在 视图事件名称 字段中键入您试验的 视图事件 的名称。
在 “目标和转换事件 ”部分中,为试验定义至少一个目标:
- 在 “目标名称 ”字段中,键入目标的描述性名称。 运行试验后,此名称将显示在试验的结果摘要中。
- 在 “转换事件名称 ”字段中,键入此目标的 转换事件 的名称。
- 在 “目标 ”字段中,选择“ 最大化 ”或“ 最小化”,具体取决于是要最大化还是最小化转换事件的发生。 此信息用于试验的结果摘要中。
注释
合作伙伴中心仅报告 24 小时内每个用户视图的第一个转换事件。 如果用户在 24 小时内在应用中触发多个转换事件,则仅报告第一个转换事件。 这旨在帮助防止单个用户在目标是最大化转化用户数量的情况下影响用户样本组的实验结果。
定义试验的远程变量和变体
在 “远程变量和变体 ”部分中,应会看到两个默认变体 :变体 A(控件) 和 变体 B。如果需要更多变体,请单击“ 添加变体”。 (可选)可以重命名每个变体。
默认情况下,变体会均匀分配给您的应用用户。 如果要选择特定的分布百分比,请清除“ 平均分配 ”复选框,然后在 “分布%”行 中键入百分比。
将远程变量添加到不同版本中。 在此部分底部的下拉列表控件中,选择要添加的每个变量,然后单击“ 添加变量”。
注释
该控件中列出的变量是从实验项目继承而来的。 变量(如项目中定义)的默认值会自动分配给控件变体。 如果要创建此处未列出的新变量,请转到相关项目页,并在其中添加变量。
编辑试验中每个唯一变体的变量值(即控件变体以外的变体)。
保存并激活试验
输入完实验的必填字段后,单击 保存 以保存实验。
如果你对实验的参数感到满意,并且已准备好激活它,以便你可以开始从应用收集试验数据,请单击“ 激活”。 当试验处于活动状态时,您的应用可以检索变体变量,并向合作伙伴中心报告视图和转换事件。 有关详细信息,请参阅 在合作伙伴中心中运行和管理试验。
重要
项目一次只能包含一个活动试验。 激活试验后,除非在创建试验时选中 了“可编辑实验 ”复选框,否则无法再修改试验参数。 建议在激活试验之前在应用中对试验进行编码。
创建用于内部测试的试验
你可能想要使用受控受众(例如,一组内部测试人员)测试试验,并在为客户激活试验之前确认所有变体都按预期工作。 通过选择可编辑试验 选项来创建试验,可以实现此目的。
若要在将其发布到客户之前对其进行测试,请遵循此过程:
- 创建两个项目:一个用于应用的公共生成,一个用于应用专用版本,仅适用于测试受众。 以下说明分别将这些项目称为公共项目和测试项目。
- 代码应用进行试验时,请在应用的公共生成中引用公共项目中的项目 ID。 在应用的专用版本中,引用测试项目中的项目 ID。
- 在测试项目中创建一个实验,并为实验选择 可编辑实验 选项。
- 激活测试项目中的试验。 将 100 个% 分配给一个版本,并验证此版本的运行结果是否如测试人员预期。 对其他变体重复此过程。
- 验证变体是否按预期工作后,对测试项目中的试验做出任何最后调整。 当您准备好将试验发布给客户时,请将其复制到公共项目中。 在此试验中,请勿选择 “可编辑试验 ”选项。
- 确保克隆的实验中目标变体分布正确。
- 激活克隆的实验,将实验发布给客户。
后续步骤
在合作伙伴中心定义试验并在应用中编写试验代码后,可以 在合作伙伴中心中运行和管理试验。