sfn4.2
2022-04-24 10:39:27 0 举报
部署架构图
作者其他创作
大纲/内容
etcd
hdfs
mariadb
②
hyperd
Mercury
skv_offline-meta_server
SP
process_exporter
nginx
zookeeper
node_exporter
离线服务
stargate_online
混部节点
SM报警监控服务
上层服务SA、SPS、SFN、SFO
SFN(上层服务)
impala
skv_offline-replica_server
SDG
8106
prometheus
SFO(上层服务)
在线服务
8107
中间服务权限管理、元数据管理、数据处理、数据订阅、私有端和SAAS端的通信等
微信、企微
内容服务
SP底层的基础组件
scheduler
Infinity
sfgoodhope
划分标准- 离线服务:一般用于离线分析和展示,如:BI统计分析。对应私有端SA集群,主要是对数据的统计分析、离线计算,不涉及OLTP对客服务。- 在线服务:要求能够即席查询,对IO性能要求较高。对应SWG、SCP、和SaaS端的在线节点,它们在硬件配置上一般使用SSD,主要用于客户的即时查询,获取触达、推荐结果。- 近线服务:介于离线和在线之间,涉及对客服务(如:发送触达消息)。对应SaaS端SFN集群,主要用于计划配置、策略计算生成运营结果,然后触达用户或将结果存储到在线节点等待客户服务获取
hdfs-nn
nginx_online
Director
SDK弹窗
部署架构图
armada
近线服务
pushgateway
私有端 集群
数据节点(data)
SWG
8822
yarn-nm
⑤
SP基础服务
skv_online
版本:V 1.0更新时间:2022年4月26日
WEB
SFN-WEB
Infinity-bridge
8176
blackbox_exporter
在线服务计算结果
服务计算结果①:线上流量转发到sfo②:在线域名访问③④⑤:负载均衡⑥:回执消息⑦:发送消息到微信、企微⑧:内容管理操作
hdfs-dn
CLB
SM
kudu
①
③
元数据节点(meta)
Audience
中间服务(SAAS)
Actor
SPS
存储/计算/日志资源池
kafka
ssdb
⑥
数据源
Mothership
通道①:数据SSH通道服务,在 SaaS 端提供 Tunnel 端口打通服务
第三方在线服务
skv_offline
SA
SDF
kudu-tserver
④
redis
Express
yarn-rm
armada服务注册、在线域名访问
Polaris
Nebula
yarn
edge
⑦
在线节点(sfoonline)
SRG
SBP
⑧
端口号8107:web请求端口,对应SFN域名,访问策路(内网)I meta节点 8106:埋点数据接收端口,域名访问策略(公网)8176:Infinity bridge订阅数据接收端口I meta&data节点8822:Polaris ssh server服务端口I meta节点8203:在线服务网关端口,对应SFO域名,访问策略(公网)I online节点
Hubble
hue
WEB访问①:访问 SA②:访问 SFN,web请求从私有端到SaaS端的路由服务
SCP
数据导入流①:数据导入 SA②:接收来自 私有部署 Infinity 端的数据推送,并将数据写到下游 Kafka 中
Sender
SCA
SaaS 集群
上层服务
Itemtrigger
kudu-master
中间服务(私有)
Metrics
通道:极光、个推
8203
用户访问SA/SF
0 条评论
下一页