知识点 › 数据基础设施

数据平台整体架构

Platform Architecture

数据基础设施Lv.1

定义

分层:接入层(回传网关/解析)→ 存储层(对象存储 + 数据湖)→ 治理层(元数据/质量/权限)→ 加工层(管道/打标/切片)→ 服务层(检索/数据集/标注对接/训练对接)。对外提供 API 与 UI 两种入口。

关键要点

  • 平台的价值是「把重复劳动变成配置」,衡量指标是「新场景接入耗时」
  • 不要把平台做成大杂烩:清晰的边界(谁产生、谁消费)比功能多重要
  • 面试画架构图时,先画数据流,再画组件

面试怎么答

能按「接入-存储-治理-加工-服务」五层讲,并说明你负责哪层。

相关知识

  • 工具链全景 — 采集 SDK → 回传网关 → 解析/质检 → 数据平台(存储/检索)→ 标注平台 → 样本工厂 → 训练平台 → 仿…
  • 规模与扩展性 — 从「百辆车/百 TB」到「万辆级/PB 级」的扩展:分片键设计、水平扩展、异步解耦、限流降级、多租户隔离。架构要在 1…
  • 智驾数仓分层 — ODS 存解析后的原始片段/事件;DWD 是帧级/片段级明细(传感器、标签、模型输出);DWS 按场景/车/天/区域汇…
  • 数据治理四件套 — 标准(命名/口径/枚举)、质量(完整性/一致性/有效性/唯一性/及时性)、安全(分级/脱敏/权限/审计)、成本(生命周…
  • 数据闭环 — 把「真实世界产生的数据」持续转化为「车端模型能力」的工程体系:车端采集 → 回传 → 存储治理 → 场景挖掘与标注 →…
在星图上打开这颗星 →