权限·边界
DIM维度表 · 口径一致
AI·Agent知识库
Agent · 自动归因
Binlog 增量 · 秒级入仓
向量数据库
外部数据
实时大屏
文件 / 接口接入
数据治理与安全
AI 能力层
日志系统
数据服务
语义检索服务
数据质量
统一元数据 Catalog
Spark 批处理
指标服务
统一 API 网关
规则 + AI 检测
Flink 流批一体
业务系统
封装MCP,【用账号控制权限】
分析框架
脱敏 · 权限 · 审计
StarRocks OLAP
BI 报表
数据集成
特征平台
影响 / 根因分析
ADS 应用汇总层月 / 周 / 日汇总,面向应用
SeaTunnel / DataX
Excel · API
OLAP 即席查询
用户画像
整库同步 · 分批拉取
BI
DWS维度汇总层
数据服务层
Kafka
三方数据
数据订阅推送
湖仓一体 ·流批一体
消息队列
数据仓库
AI 赋能数据 · 让开发与分析提效
文件系统
Flink CDC
TMP临时表
SQL Copilot
批流一体采集
模型服务网关
应用层
批量集成
绩效工具
数据安全
行为采集埋点
数据赋能 AI · 高质量供给模型
统一出口
鉴权 · 限流 · 审计
实时同步
AI时代数仓
智能数据建模
批量/实时采集
数据源
应用
秒级交互分析
对话式取数
指标口径
交付
工作规范
行为采集
开放API
业务知识·战略目标
……
AI 数据助手
元数据与血缘
智能调度运维
ChatBI 对话分析
TMP临时表 · 过程可复算
ChatBI 智能问答
DWS 轻度汇总层主题宽表 · 指标沉淀
内部数据
DWD维度事实明细、事实表
向量检索
削峰 · 解耦 · 回放
数据消费
分析挖掘
RAG 知识语料库
ODS原始数据,与业务库保持一致
训练/评测数据集
实时可视
DWD 明细事实层清洗整合 · 一致性事实
DataOps【数据研发运营一体化】
元数据 AI 补全
DIM维度表
Paimon / Iceberg 表格式
统一底座:
数据资产地图
传统数仓
业务系统MySQL / SQLServer
ADS月、周、天汇总数据
ODS 贴源层原始数据 · 与业务库一致 · 开放表格式存储
IoT 设备
智能预警
OSS/S3 存算分离
统一口径 Headless指标
内外部全接入
异常检测与归因
报表服务
交付数据
双轮驱动