问题标签 [abtest]

我正在使用power.prop.testR 中的函数。

我正在进行 A/B 测试，我正在确定每个组的最小展示次数的提升，以使 A/B 测试显着。

当我运行如下函数时，我得到第二个比例 (p2) 为 0.0001870215，n 为每组 2,571,429：

我的回答是这样的：

当我用我对 p2 (0.0001870215) 的答案重新运行它来求解 n 时，会出现一个不同的 n (230,952.6)：

我的 n 更改为：

为什么在这种情况下 n 会改变？

我希望将我的用户群分成 10 个组并展示 10 个不同的 UI，看看他们对此有何感受。

所以每个用户组总是有单一类型的 UI。

即假设我有 10k 用户，当我在用户安装时推出下一个版本时，我将显示 1000 个用户 1 UI 和另外 1000 个用户 1 UI，就像所有 10K 用户一样。

我知道这可以在 AB 测试框架的帮助下完成。

基本上我想在应用程序启动时调用一个 API，它必须返回 1 到 10 之间的值，然后我可以将它存储在我的钥匙串中，下次启动应用程序时，我会查看它是否已经在钥匙串中，我不会调用 API。

所以基本上API会知道有多少请求已经到来，它会划分并发送正确的值

所以基于钥匙串中的价值，我将展示不同的、不同的 UI，在这里 AB 测试框架的工作将给我价值 1 到 10 的 API 部分。

网上有很多 AB 测试框架。但是我找不到任何适合我需要的框架。

任何帮助表示赞赏！

我正在使用 power.prop.test 函数进行 A/B 测试。根据 A/B 测试中每组的展示次数，统计上显着的提升是多少？

对照组的比例为 0.004。

如果我运行以下代码：

结果是这样的：

比例功率计算的两个样本比较

注意：n 是每组中的数字

那么这是否是说最小提升为 0.000100（0.004100341-0.004），相当于 0.01%？

它似乎很低，这就是我问的原因。

power.prop.test 的电源部分是否有行业标准？

我正在使用该功能查找 p2 但不确定功率标准是什么。

例如，应该是0.8还是0.9？

因此，我一直在将部分 UI 代码移至 ReactJS，以便对我的应用程序进行 A/B 测试，以便可以轻松配置它。我从某个地方听说 Intuit 的 Wasabi 是一个很棒的框架，但我不喜欢它在生产中设置的开销。我想要一些可以轻松配置但数据仍保留在内部的东西。

我正在运行 AAB 测试，这意味着测试中有两个对照组，以确保总体分布正确。结果告诉我，复制的对照组比原始组显示出阳性结果。

我在两个应用程序上多次复制了测试，但原始组和复制的对照组之间的结果仍然不同。

这有什么可能的原因吗？

我的客户希望改善购物车页面中优惠券的使用情况，该页面将充当预先输入的组件。他想用 Google Optimise（A/B 测试）进行测试。

当前购物车页面：只是一个优惠券文本框和应用按钮。

变化：带有应用按钮的建议文本框（如预先输入）。

我们已经使用 angularjs 开发了购物车页面，但我的客户只想使用谷歌优化可视化编辑器创建变体页面。如何使用没有 angularjs 的优化编辑器创建 typeahead 以及如何将值绑定到文本框模型？

出于 AB 测试的目的，我想在 Tableau 中创建 2 个参与测试的用户组。我有他们的 PIN 作为标识符。我怎样才能把它们分成两组？

谢谢

我正在使用 Google Optimize 将 jQuery 添加到我的网站。我在控制台中收到此错误：

无法在“DOMWindow”上执行“postMessage”：提供的目标原点 ('') 与接收窗口的原点 ('') 不匹配

有没有办法解决这个问题？

这是我的 jQuery：

假设使用 Firebase AB 测试，我正在测试使用列构建的布局是否比使用行构建的布局更能将用户留在应用程序中。如果有 3 行而不是 4 行，是否可以仅针对“行布局”测试中的用户测试用户是否停留更长时间？

换句话说，我可以在执行 AB 测试的同时，对原始 AB 测试中的一部分用户执行额外的 AB 测试吗？