工业 A/B 测试每组所需最小样本量闭式公式与最小可检测效应 (Minimum Detectable Effect, MDE) 严格数学推导 (A/B Test Minimum Sample Size Formula & MDE Power Derivation) 是任何实验上线前计算“实验需要跑几天、分流百分比是多少”的黄金计算准则;在双样本均值检验下,设定显著性水平
α 与功效
1−β,两组样本量相等的每组所需样本量公式严格推导为:
n=δ2(zα/2+zβ)2⋅2σ2(其中
δ=∣μT−μC∣ 为预期效应绝对值,
σ2 为指标总体方差);对于二项分布比率指标(如 CTR/CVR,均值为
p),方差替换为
σ2=p(1−p),得到:
n=δ2(zα/2+zβ)2⋅2pˉ(1−pˉ);反之,在固定日活流量与实验天数(固定总样本量
n)下,可反解出系统能可靠检测出的最小效应阈值
MDE=(zα/2+zβ)n2σ2。