步骤 4:选择设计
这是最重要的一步,但同样也取决于团队。
Yandex 拥有一种特殊的 美国电子邮件地址自动算法,可以将资源的整个受众分成几组,并在 A/B 测试开始之前确定流量。样本包括定性分析和决策所需的一定数量的人。
在决定设计之前,我们建议回答以下问题:
代表被测试的受众——新手、有经验 可以独立于已建立的 的用户或其他群体;
按照什么原则进行分组?
样本量是多少;
测试需要多长时间;
可接受的显著性水平(通常为 90-95%)。
并非每个所有者都很好地了 意大利电话号码 解如何确定 A/B 测试的受众样本量。只有个人经验才能有所帮助。回答你自己这个问题:你希望看到什么数字变化。然后就会清楚有多少用户应该参与测试所制定的假设。
让我们回到增加销售量的话题。我们使用上下文广告流量并研究所有新用户,而不划分细分市场。如果按照平均值计算,我们每天有 100 名访客,其中 10% 是新访客,那么 A/B 测试将持续一个月,并为我们带来 300 名新买家。这足以得出结论。
步骤 5:进行实验
一旦测试开始,剩下的就是等待结果。仔细观察并记录初始阶段的任何明显变化。监测接受测试的观众的舒适度,并确保机制正常运行。
有时分析的开始可以为我们的问题提供许多答案并证实另一种假设。不过,不要太快放弃你的研究。最常见的错误就在于此。研究结束时可能会没有任何结果。因此,请遵守预先设定的 A/B 测试期限。
也讀吧!
“如何计算转化率:3 种行之有效的方法”
阅读更多
步骤 6:分析结果
您必须针对两个流量段计算先前选择的研究指标所获得的结果。所得值之间的差异将成为测试开始时提出的问题的答案。它的缺失是由于创新毫无意义,即使在考虑研究的各个部分时它存在。对于测试的某些部分,正在研究的版本可能会显示出更好的结果,或者相反,显示出更差的结果。