今天我在谷歌分析中遇到了一些奇怪的事情。我的一个实验以 94.7 % 的概率和 52 % 的概率结束，并且仍然处于“未找到获胜者”状态。
有人遇到过这种情况吗？为什么会这样？
问问题
376 次
1 回答
1
这意味着虽然您确实有比您的控制更好的版本，但它们的胜率不足以达到 95% 的置信区间。换句话说，你有一个赢家，但它在统计上并不显着，或者这个测试的结果有可能是随机的。
如果没有看到展示次数和转化次数，很难更具体。我的猜测是，要么这个测试的转化率非常低，要么获胜版本的改进量非常小，或者两者兼而有之。
对于如何继续，您有几个选择。
- 仅使用对照和最强变体重复测试。通过仅使用两个版本重复测试，您的测试可能会达到显着性。
- 实施最强的变体并找到其他要测试的东西。这可能是我会选择的。理想情况下，您希望确定对转化率影响最大的页面元素。
不管怎样，我都会结束当前的测试。在这一点上，让它运行更长时间没有任何好处。
于 2014-06-03T01:15:20.130 回答