M2-007Medium上线评估 · Launch evaluation
上线后核心指标变差,你怎么决定是否回滚?
A core metric worsens after launch. How do you decide whether to roll back?
💡 考场高分一句话答案:
先判断变差是否真实且可归因,再看是否触及预设的回滚阈值;有阈值就按阈值执行,没有阈值就按“损失速度 vs 修复时间”决策。
First confirm the worsening is real and attributable, then apply the pre-registered threshold. Without a threshold, compare loss rate against time-to-fix.
📌 核心考察要点 (Key Points)
- 先证伪:是不是同期其他发布/外部事件导致(看 launch calendar 与分群)
- 看阈值:上线前应预注册“护栏跌破 X 即回滚”,有则无条件执行
- 算速度:当前损失速率 × 预计修复时间 vs 回滚成本(回滚也有成本:用户体验割裂、数据不一致)
- 部分回滚:按平台/地区/人群回滚,而不是全量
- Falsify first: could another launch or an external event explain it? Check the launch calendar and segments
- Use the threshold: 'roll back if the guardrail crosses X' should have been agreed before launch; if it did, execute without debate
- Compute the rate: current loss per day × expected time to fix, versus the cost of rollback (experience discontinuity, data inconsistency)
- Partial rollback: by platform, region or segment rather than all-or-nothing
⚖️ 业务权衡与取舍 (Trade-offs & Calibration)
回滚决策的难点不是技术而是责任与沉没成本。DS 的价值在于把讨论从“谁的责任”转成“损失速率与修复时间的比较”。一个可用的表达:“按当前速率,每多留一天损失约 X 万美元;工程说修复需要 3 天,回滚需要 0.5 天——所以我建议回滚,修好再上。”
⚠️ 常见高频面试陷阱与避坑指南
- 因为“已经投入很多”而不回滚(沉没成本谬误)
- 不做部分回滚,一刀切全量下线
🔍 大厂面试官连环追问 (Follow-ups)
- 回滚本身有什么风险?
- 如何设计一个“可灰度回滚”的发布流程?
嫌字多看太累?进入苏格拉底式对话推演实验室
零打字负担,以大厂考官真实困境切入,通过点选直觉选项暴露思维盲区,手把手推导 Why。
⚡
想检验本题的肌肉记忆?进入 3 阶闪卡主动回忆盲测
隐藏答案遮罩,自测:审题锚点 ➔ 数理公式机理 ➔ 工业标杆代码与连环追问。3 分钟攻破认知盲区!