知识点 › 仿真与评测

A/B 与灰度

A/B & Canary

仿真与评测Lv.2

定义

线上对比:把车队分成实验组/对照组,跑不同模型版本,比较接管率、舒适度、通行效率。灰度发布先小比例、再扩大,出问题可快速回滚。

关键要点

  • 线上 A/B 的难点是「场景不可控」:两组跑的路不一样,要用分层/配对校正
  • 指标要有统计显著性,别拿一天的数据下结论
  • 灰度的价值是「限制爆炸半径」,不是「省钱」

面试怎么答

讲「分层校正 + 显著性 + 爆炸半径」,说明你懂线上实验。

相关知识

  • 线上监控与埋点 — 车端埋点上报:接管、急刹、降级、感知异常、时延、算力占用、传感器故障。云端做看板与告警,按车型/区域/版本切片,异常自…
  • 回归门禁 — 每次模型/代码变更自动跑固定回归集,指标退化就阻止发布。是高频迭代的安全网:没有门禁,团队会陷入「修一个坏三个」的循环。
在星图上打开这颗星 →