连续监控偷窥问题导致的第一类错误严重膨胀 (Continuous Monitoring / Peeking Problem & False-Positive Inflation) 与基于鞅论的混合序贯概率比检验 (Mixture Sequential Probability Ratio Test, mSPRT) 是现代工业 A/B 实验平台防御 P-hacking、实现合法“随时查看随时早停”的核心统计学理论;偷窥陷阱定理:如果在实验运行期间每天反复查看
p 值并在
p<0.05 时立即提前终止实验,即使在零假设
H0(完全无效果)下,
累积假阳性率会在 30 天内从标称的 5% 剧烈膨胀至 30%~40% 以上;防御方案:1) 预注册固定样本量停止规则 (Fixed Horizon Testing: 严格禁止提前下结论);2) 序贯检验界限 (Group Sequential Design: O'Brien-Fleming / Pocock 边界调整);3) 连续序贯检验 (mSPRT / 沃尔德序贯检验在鞅测度下的扩展): 构造时刻有效的检验统计量与置信序列 (Always-valid
p-values & Confidence Sequences),在保证族错误率
≤α 前提下支持实时早停。