大数据标准化处理流程
2021-07-26 13:55:23
4
举报
大数据实时计算,离线计算通用标准化流程,flink,spark,dataworks。 从全量、增量数据同步到etl清洗,到数仓建设,对外数据服务全生命流程图
DIM
ADS
实时数仓
对外数据服务
Datax
技术选型关键点:
Stream
离线数仓
ODS
dataworks
MaxCompute
ETL
物流信息统计
DWD
hologres
大屏服务
BI报表
数据源
DWS
实时监控
实时指标
Canal
应用场景