知识点 › 范式与价值
闭环失效的典型坑
Failure Modes
定义
常见失效：①采集分布偏移（只采容易触发的场景，长尾反而漏掉）；②标注与训练目标不一致；③离线指标涨、实车不涨（过拟合测试集/分布外）；④闭环断在「部署」——发现问题但排不上版本；⑤没有 owner，问题在部门间漂流。
关键要点
- 最隐蔽的坑：用测试集挖 bad case 再训练，指标虚高，实际退化
- 组织坑：数据、算法、仿真各自 KPI 割裂，没人对「最终上车效果」负责
- 解法：固定 holdout、双盲评测、端到端 owner、按月做闭环复盘
面试怎么答
主动说坑是高手信号，每个坑配一句「我们怎么防的」。