1如何通过绘制“新用户 (New Users) vs 老用户 (Existing Users)”的时序指标学习曲线 (Cohort Learning Curves) 精确分离新奇效应与真实功能增量?
2长期保留对照组 (Universal Long-term Holdout Group: 长期保留 1%~5% 流量永远不发布新特性): 为什么它对评估多个微小改动的累积复合长期因果效应至关重要?
3反转实验 (Reverse Experiment / Turn-off Test): 在一个全量发布 3 个月的功能上,将 5% 用户切回旧版本,如何通过“关掉功能看跌幅”验证真实留存收益?
4促销补贴的蚕食效应 (Cannibalization) 与需求前置 (Intertemporal Substitution): 为什么必须在实验结束后继续追踪 14~30 天的净增量 GMV?
5替代指标 (Surrogate Metrics / Athey et al.): 如何构建短期可观测的代理指标在短短 2 周内高保真预测 6 个月后的长期用户 LTV 留存?