某数据平台架构
2016-04-16 10:39:20 0 举报
Big Data Layers
作者其他创作
大纲/内容
Mahout(数据挖掘)
半结构化/非结构化数据
上层业务
MapReduce on Yarn(离线编程模型)
数据传输层
Storm(实时编程模型)
Tachyon(分布式内存文件存储)
数据存储层
量化派(Quant Group)是一家金融大数据公司http://www.csdn.net/article/2015-10-06/2825849
R(数据挖掘)
Flume/Sqoop/Java NIQ传输/RabbitMQ
数据分析层
Armbari(数据平台管理)
Hbase
结构化数据
编程模型层
数据源
Kafka消息队列
Spark on Yarn(内存编程模型)
实时流数据
zookeeper(数据平台配置与调度)
HDFS(分布式文件存储)
0 条评论
下一页