知识点 › 数据基础设施
数据平台整体架构
Platform Architecture
定义
分层:接入层(回传网关/解析)→ 存储层(对象存储 + 数据湖)→ 治理层(元数据/质量/权限)→ 加工层(管道/打标/切片)→ 服务层(检索/数据集/标注对接/训练对接)。对外提供 API 与 UI 两种入口。
关键要点
- 平台的价值是「把重复劳动变成配置」,衡量指标是「新场景接入耗时」
- 不要把平台做成大杂烩:清晰的边界(谁产生、谁消费)比功能多重要
- 面试画架构图时,先画数据流,再画组件
面试怎么答
能按「接入-存储-治理-加工-服务」五层讲,并说明你负责哪层。
相关知识
- 工具链全景 — 采集 SDK → 回传网关 → 解析/质检 → 数据平台(存储/检索)→ 标注平台 → 样本工厂 → 训练平台 → 仿…
- 规模与扩展性 — 从「百辆车/百 TB」到「万辆级/PB 级」的扩展:分片键设计、水平扩展、异步解耦、限流降级、多租户隔离。架构要在 1…
- 智驾数仓分层 — ODS 存解析后的原始片段/事件;DWD 是帧级/片段级明细(传感器、标签、模型输出);DWS 按场景/车/天/区域汇…
- 数据治理四件套 — 标准(命名/口径/枚举)、质量(完整性/一致性/有效性/唯一性/及时性)、安全(分级/脱敏/权限/审计)、成本(生命周…
- 数据闭环 — 把「真实世界产生的数据」持续转化为「车端模型能力」的工程体系:车端采集 → 回传 → 存储治理 → 场景挖掘与标注 →…