低碳出行数据处理流程
2018-05-24 15:11:59 0 举报低碳出行数据处理流程
作者其他创作
大纲/内容
国家智能电网数据
源数据采集
各时段滴滴出行排碳量
出行与家电排碳量占比
sparkStreaming实时分析
中石化数据
出行中滴滴与总出行排碳量占比
Hbase（与Hive结合）
文本
各品牌家电产品排碳量以及好评率
数据缓存
滴滴数据平台数据
API输出（动态感知）
数据封装
离线分析
爬虫抓取各电商平台数据
省、市各时段耗电排碳量
elasticsearch
数据分析
数据存储
多源异构低炭环保大数据分析系统
Flume采集
其它数据（智能构建）
SparkStreaming
分析结果存储
kafka
0 条评论
下一页
