spark
Portal Server Cluster(new)
负载均衡
Hive
PC浏览器
spark/hql
Hive Connector
展现层
Report Server(new)
presto资源需求:8C/64G
Greenplum
数据源
presto(new)
Cache
mysql
接入层
较少量数据查询
Hadoop cluster
azkaban
presto cluster
DataPipeline
Hadoop扩容需求:16C/64G/4T
python
portal需求资源:4C/8G
数据层
导入后台上传的数据文件
report需求资源:8C/64G
用户层
大量历史数据增量提取