大数据平台采集架构

实时流处理

批计算MapReduce

SQLHive

数据采集工具

安全权限

         Hadoop生态系统

协同服务

AmbariManager

批处理

消息系统Kafka

数据挖掘

数据传输Sqoop

Security

运维监控

内存计算Spark

NoSQLHBase

数据挖掘工具

多维搜索

YARN资源管理系统

图计算

工具套件

数据可视化

Linux Operation System操作系统