Online Metrics & Guardrails: 解释为什么需要护栏指标（guardrail metrics）。

Core Concept: 护栏指标是'必须不恶化'的指标（一票否决）；防止短期优化损害长期（用户体验/生态/安全）。

数学机理：<strong>护栏指标（guardrail metrics）</strong>——(1) <strong>定义</strong>——在实验中<strong>必须不恶化</strong>（或'不显著恶化'）的指标；若恶化则<strong>一票否决</strong>（即使主指标提升也不上线）。(2) <strong>为什么需要</strong>——(a) <strong>短期优化损害长期</strong>（只优化 CTR 会'标题党'）；(b) <strong>单指标优化的盲区</strong>（一个指标涨可能伴随其他指标跌）；(c) <strong>风险的'一票否决'</strong>（如'延迟暴增'或'违规内容增加'必须阻断）。(3) <strong>类型</strong>——(a) <strong>用户体验类</strong>——(i) 负反馈率（不感兴趣/举报/屏蔽）；(ii) 加载延迟（P50/P99）；(iii) 报错率/崩溃率；(iv) '快速返回率'（点击后立刻返回 = 不满意）。(b) <strong>生态类</strong>——(i) 内容多样性（ILD/类别覆盖）；(ii) 长尾曝光占比；(iii) 创作者留存/活跃；(iv) 内容供给量。(c) <strong>业务类</strong>——(i) 留存（次日/次周）；(ii) 卸载率；(iii) 投诉率；(iv) 客服工单量。(d) <strong>安全类</strong>——(i) 违规内容率；(ii) 隐私泄露；(iii) 舆情风险。(4) <strong>与主指标的关系</strong>——(a) <strong>主指标（primary）</strong>——<strong>唯一定胜负</strong>；(b) <strong>护栏</strong>——<strong>必须不恶化</strong>；(c) <strong>决策规则</strong>——(i) 主指标显著提升 <strong>且</strong> 所有护栏不显著恶化 → 上线；(ii) 主指标提升但护栏恶化 → <strong>不上线</strong>（或分析原因）；(iii) 主指标不提升 → 不上线。(5) <strong>阈值的设定</strong>——(a) <strong>'不显著恶化'</strong>（统计判据）；(b) <strong>'不超过 X%'</strong>（业务判据，如延迟 +10%）；(c) <strong>'绝对阈值'</strong>（如 P99 延迟 < 200ms）；(d) <strong>注意</strong>——(i) 阈值太松则失去保护；(ii) 太严则'什么都上不了'；故需按业务定。(6) <strong>常见错误</strong>——(a) <strong>事后挑护栏</strong>（只报告'没恶化的'）→ 需<strong>预注册</strong>；(b) <strong>护栏太多</strong>（几十个指标 → 假阳性率上升）→ 需<strong>精简</strong>（选最关键的 3~5 个）；(c) <strong>不校正多重比较</strong>（见多重比较题）。<strong>与其他问题的关系</strong>——(a) 与'不能只看短期点击'（同一主题）；(b) 与'多目标实验'（主指标 + 护栏框架）；(c) 与'长期效应'（留存作为护栏）。<strong>实践建议</strong>——(a) <strong>预注册护栏指标</strong>（避免事后挑）；(b) <strong>精简</strong>（3~5 个关键护栏）；(c) <strong>阈值按业务定</strong>（绝对 + 相对）；(d) <strong>一票否决</strong>（护栏恶化则不上线）；(e) <strong>分层看护栏</strong>（新用户/长尾的护栏可能更差）；(f) <strong>长期护栏</strong>（留存/LTV 需长周期）。<strong>度量</strong>——(a) 护栏指标的恶化程度；(b) 护栏的假阳性率（多重比较）；(c) 上线后的长期表现。

深度剖析与工程权衡：① <strong>'一票否决'是护栏的核心机制</strong>——即使主指标提升，护栏恶化也不上线；面试中能指出这一点是深度理解的标志。② <strong>'预注册护栏'避免事后挑</strong>——否则会'选择性报告'。③ <strong>'护栏不能太多'</strong>——几十个护栏会因多重比较产生假阳性；故需精简。④ <strong>'快速返回率'是实用的用户体验护栏</strong>——点击后立刻返回 = 不满意。⑤ <strong>'分层看护栏'</strong>——整体护栏好不代表新用户/长尾好。⑥ <strong>面试要点</strong>——被问'为什么要护栏指标'，应给出'<strong>防短期损害长期 + 一票否决 + 四类护栏 + 预注册 + 精简 + 分层</strong>'；能指出'快速返回率'是深度理解的标志。