M2-004MediumMetric Drop 诊断 · Metric-drop diagnosis
新用户 7 日留存下降了 4%,但老用户完全不变。可能是什么原因?
New-user 7-day retention falls 4% while existing users are unchanged. What could cause it?
💡 考场高分一句话答案:
说明问题出在“首次体验链路”或“新用户来源结构”上;优先查获客渠道结构变化与 onboarding 流程改动。
The problem is in the first-run experience or in the acquisition mix. Check channel-mix shifts first, then onboarding changes.
📌 核心考察要点 (Key Points)
- 结构效应(mix shift):如果新增用户里低质渠道占比上升,整体留存会降而分渠道留存不变——先做标准化
- 首次体验:注册/引导流程改动、首屏加载、权限弹窗、默认设置变化
- 产品匹配:新用户画像与产品定位偏离(如投放素材承诺了产品没有的功能)
- 外部:应用商店排名变化带来的自然量质量差异
- Mix shift: if the share of low-quality channels rose, overall retention falls while per-channel retention is unchanged — standardise before concluding
- First-run experience: sign-up or onboarding changes, first-screen load, permission prompts, default settings
- Product fit: the new-user profile drifted from the product's promise (ad creative promising something the product lacks)
- External: app-store ranking changes bringing lower-intent organic traffic
📐 第一性原理与数理推导机理
结构效应的检验方法:$$\text{Ret}_{\text{std}}=\sum_c w_c^{\text{base}}\cdot \text{Ret}_c^{\text{current}}$$用基期渠道权重 $w_c^{\text{base}}$ 重算当期留存。若标准化后差异消失,则完全是 mix shift,产品本身没问题。
⚖️ 业务权衡与取舍 (Trade-offs & Calibration)
这是 Product DS 最实用的技巧之一:任何“整体指标变化但分群不变”的现象,都要先做标准化。Simpson 悖论在这里是常态而非例外,尤其在新用户涌入、渠道投放变化、地域扩张的时期。
⚠️ 常见高频面试陷阱与避坑指南
- 直接归因于产品改动,不先做结构标准化
- 只看整体留存,不看分渠道曲线
🔍 大厂面试官连环追问 (Follow-ups)
- 如何判断是渠道质量下降还是产品变差?
- 如果所有渠道都降了但幅度不同,怎么解释?
嫌字多看太累?进入苏格拉底式对话推演实验室
零打字负担,以大厂考官真实困境切入,通过点选直觉选项暴露思维盲区,手把手推导 Why。
⚡
想检验本题的肌肉记忆?进入 3 阶闪卡主动回忆盲测
隐藏答案遮罩,自测:审题锚点 ➔ 数理公式机理 ➔ 工业标杆代码与连环追问。3 分钟攻破认知盲区!