基于Hadoop的数据仓库架构设计
2020-03-30 16:55:17 26 举报
基于Hadoop的数据仓库架构设计
作者其他创作
大纲/内容
Sqoop
...
Agent
图形化数据分析查看
文件/日志/影像
Context Independent DW数据关联挖掘
DWD基础明细层
结果数据写入 HBase提供检索和查询功能
Logical DW明细查询、影像检索、文档检索
ObjectStore
Operational DWCluster时间窗口数据
Kafka
实时数据同步组件
基于内存/SSD的存储分析引擎
图形化挖掘工具
实时数据
公共主题模型层
分布式挖掘算法库
实时同步
全量导入定时增量
元数据管理
Full-TextIndex
ODS贴源层
Multi-Index
BI报表工具
分布式统计算法库
企业数据总线
CDC(IBM)OGG(Oracle)
Operational Data Warehouse
RDB
FTP
数据稽核
实时数据订阅
企业应用N
企业数据库1
REST
Flume
数据处理工作流调度
企业应用1
基于Hadoop的数据仓库架构设计
Traditional DW Cluster
企业数据库N
实时数据装载入内存/SSD存储准实时分析
实时条件判断实时比对实时时间窗口数据统计实时数据挖掘模型预测
Data Mart Cluster交互式数据探索
0 条评论
回复 删除
下一页
