大数据平台架构图
2026-01-09 10:50:37 0 举报
大数据平台架构
作者其他创作
大纲/内容
ETL输出(Kettle)
Zookeeper分布式协调服务
数据存储
Redis集群
批量数据抽取(Spark)
数据订阅
HBase
日志收集代理(Flume)
数据整合平台(ELK)
推送服务
外部数据采集(Python爬虫)
数据查询(Impala)
挖掘分析平台
数据服务层
数据模型
数据计算层
数据可视化引擎
ES全文检索
离线计算(Spark SQL)
Yarn统一资源调度管理
政务共享平台
实时流处理(Spark Streaming/Storm)
查询服务引擎
规则引擎(Drools)
MySQL集群
ETL输入(Kettle)
数据采集层
数据服务工具
知识图谱
数据交换平台(Kafka)
互联网数据/内部数据
自然语言处理NLP
0 条评论
下一页