st报表层
准实时sparkstreamming
dm
kafka集群
mysql 业务数据维度数据
数据备份机制
flume行为日志
flink 实时计算
dwd
实时指标
canal服务端伪装mysql从节点
hdfs数据落地
canal客户端
维度数据K :V
kudu(dw层)
spark core 过滤,拼接
impala(olap)
用户行为数据 app埋点
olap:kylin即席查询
增删改同步到redis
redis集群
应用层
数据质量监控
flume集群
ods
sqoop维度数据DataX
dw