大数据平台设计方案
2020-05-26 09:55:54 1 举报登录查看完整内容
大数据平台设计方案
作者其他创作
大纲/内容
Sqoop / Shell
爬虫
数据查询
机器学习
5.1.0-cdh_6.3.1
业务数据
ODS
数据计算
oozie
DM数据集市层
库存
协调管理
订单
CentOS_7.5.1804
HBase
2.4.0-cdh_6.3.1
Zookeeper
2.1.1-cdh_6.3.1
数据采集传输
Stome
Oozie
统一数据服务
营销
PC端
MySql
etl kettle
库存主题域
...
ODS基础数据层
系统版本
商品
第三方数据
fullData
original_partition
RDS_...
KafKa
智能推荐
CDH_6.3.1
系统
商品主题域
会员主题域
数据存储
用户画像
数据业务化-业务反哺数据
分销
RDS_1
DW数据明细层、数据汇总层
RDS_2
CDH
数据源
1.9.0-cdh_6.3.1
Spark
任务调度
交易主题域
5.7.26
hive
数据应用层
广告营销
RDS_3
3.4.5-cdh_6.3.1
上传数据
Hadoop_3.0.0-cdh6.3.1
Sqoop
ETL
Hadoop
业务数据入仓数据流向图
Hive
用户
大数据平台整体设计方案
日志数据
2.1.0-cdh_6.3.1
API 接入层
大数据平台技术选型
update or insert
统计分析
数据公共层
移动端
BI报表分析
changeData
数据挖掘
success
财务
2.2.1-cdh_6.3.1
error
Flume
收藏
收藏
职业：本科
0 条评论
回复 删除
下一页
