今天,我在Google Analytics(分析)中遇到了一些奇怪的事情。我的一项实验以94.7%的原始数据胜过原始结果的概率和52%的原始数据胜过原始结果的概率结束,但状态仍然为“未找到赢家”。
有人遇到过这种情况吗?为什么会这样呢?
最佳答案
这意味着,尽管您确实拥有比您的控制更好的版本,但它们的赢利程度不足以达到95%confidence interval。换句话说,您有一个获胜者,但在统计上并不重要,或者该测试的结果很有可能是随机的。
如果没有看到展示次数和转化次数,就很难具体说明。我的猜测是,此测试的转换率非常低,获胜版本的改进量很小,或两者兼而有之。
您可以选择几种方法进行操作。
仅使用对照和最强变体重复测试。通过仅使用两个版本重复测试,您的测试将很有意义。
实施最强的变体并找到其他要测试的东西。这可能是我会选择的。理想情况下,您要确定对转换率影响最大的页面元素。
无论哪种方式,我都会结束当前的测试。在这一点上,让它运行更长的时间没有任何收获。