大数据服务部署图

数据应用(8 台)app1: PC调度/数据库mysqlapp2: FineBI/报表数据库app3: 移动端调度/调度数据库service1: zeppelin / 数据产品service2: 算法使用机器scheduler1 ~ 3: 新分布式调度系统

scheduler1 ~ 3

service-mesh1

data-service1~3

speed-data1 ~ 3

app1 ~ 3

数据接入(6 台)log1 ~ 3: PC 数据接收 rsync/kafkalog4 ~ 6: 移动数据接收 rsync/kafka

数据分析(6 台)data: clickhouse/hbase/presto/phoenix serverclickhouse: clickhouse

node28

service-core1 ~ 3

service1 ~ 2

master2

master1

data1 ~ 3

node1

log1 ~ 6

clickhouse4 ~ 6

manager1

数据服务(3 台)data-service: hive/spark/zookeeper/hue

node......

分布式数据库(7 台)service-mesh: 大数据和数据库代理service-core1