2

我为我的应用程序的一个版本 (1.14) 运行了 A/B 测试。参数少,共3组(包括对照组)。

开始 A/B 测试后,我发布了应用程序的 1.15、1.16 和 1.17 版本。

测试找到了领导者。我的期望是,在推出领导者后,其配置将应用于该版本的所有用户(仅适用于 1.14)。

但实际结果是:

  1. 我点击“推出领导者”
  2. 出现带有参数配置的对话框(3 个参数)
  3. 我将所有参数保留为“不更改值”,除了一个
  4. 我重定向到未更改的远程配置页面(在推出对话框期间更改的参数保持默认)

我安装了该版本(1.14)的发布和调试应用程序,发现更改的参数不适用。

所以看起来什么都没发生。

注意:现在我基于与完成的 A/B 测试相同的参数,针对 1.15、1.16 和 1.17 版本进行了另一个正在运行的 A/B 测试。

4

1 回答 1

0

这实际上不再是一个选择。当您推出时,您不能再更改单个参数,因为这实际上会使您的实验数据过时。这些值都应该在较新的版本中正确推出。

于 2019-02-20T01:07:56.797 回答