大数据湖体系规划架构图
2026-01-31 00:01:11 0 举报
简洁、美观、大方、通用的大数据湖体系规划架构图
作者其他创作
大纲/内容
网络/平台
生产型系统
PB级存储
生产系统驻留
大数据湖体系规划图
生态圈系统
可视化定义 ● 即配即用
计算处理
数据接入
统一数据接入
资源申请规范
Oracle
源端系统
HBase
应用专区
TB级计算
交互式查询引擎
MSS
源数据提供规范
大吞吐管道
访问接入规范
平台工具
OSS
(XML/TXT等)
计算资源调度
运营管理规范
外部系统
内部应用
角色权限规范
Greenplum
生态圈
自动调度 ● 按需使用
数据安全规范
数据存储
存储计算加速
合作伙伴
HDFS
(语音/视频等)
(数据库/格式文件等)
透明化部署 ● 实时接入调度
IOT接入
互联网
半结构化数据
数据分类规范
服务对象
网络爬虫
整合数据(1) 全网/分层支撑
同步镜像
采集接入规范
计算调度规范
元字典规范
原生数据(1+N) 就近/分域存储
交互分析OLAP
TXT
缓存加速
离线批处理引擎
主数据(1) 全网统一
数据模型规范
存储规范
......
跨架构数据联邦
前置采集
省分专区
生产数据(1+N) 操作/临时存储
运营管控
生态圈专区
统一数据服务代理(Data Broker)
生产直采
数据沙箱
应用构建工具
分析型系统
生产模型规范
资源池化 ● 弹性伸缩
挖掘工具
MySQL
BSS
访问共享
逻辑化视图
协同计算引擎
API
访问接口(JDBC、ODBC)
数据共享标准
同源异构访问
结构化数据
计算侧cache
实时检索和流处理引擎
统一索引层
数据湖统一目录《统一服务数据集》
非结构化数据
统一接入配置
0 条评论
下一页