知识点 › 算子
幂等与可重放
Idempotency
定义
同一输入 + 同一算子版本 → 同一输出;重复执行不产生副作用(不重复计数、不重复落库、不重复计费)。是数据可复现的前提,也是重跑与回填的安全底线。
关键要点
- 实现手段:内容寻址输出、幂等键、去重表、原子替换
- 最常见的破坏者:时间戳随机、随机采样没固定种子、外部状态(当前时间/机器)
- 算子版本漂移会让「老数据重跑得到新结果」,直接毁掉可复现性
面试怎么答
讲「内容寻址 + 幂等键」,并举一个重跑导致数据翻倍的坑。
相关知识
- 数据加工算子链 — 从原始包到可用样本的一条算子链:解析/解包 → 解码 → 时间对齐与标定 → 脱敏 → 质检 → 自动打标 → 抽帧切…