testing - 如何计算ab测试样本量

Question

您是否知道计算每个变体的 ab 测试样本量的公式：

1. 基线转化率
2. 最小可检测效果
3. 统计学意义
4. 统计能力

这是一些计算样本量的在线工具：

• https://www.optimizely.com/resources/sample-size-calculator

• http://www.evanmiller.org/ab-testing/sample-size.html

Answer 1

对于给定的功效、假阳性率、最小可检测效应 (MDE) 和基线转换率，可以通过比较零假设和备择假设下的图表来确定公式。

Gerald Van Belle 写了一本名为“Statistical Rules of Thumb”的书来回顾这种方法。以下是第 2 章的快照，其中涵盖了样本量。

当您将产生此等式的替代假设和零假设的临界值相等时，可以得出该公式：

这些都是范贝尔教科书中的截图。