数据采集系统架构
2020-02-26 15:10:04 4 举报
登录查看完整内容
数据集采系统软件架构图
作者其他创作
大纲/内容
监控服务
数据归档
硬件监控
数据统计
清洗
实时统计
数据订阅
境内
反向代理
数据存储、统计、推送
聚合统计
验证
数据采集
爬虫
负载均衡
详情API
动态内容采集
规则N
网关
已安装服务监控
异常通知
集中队列（redis）
API采集
分发队列（kafka）
境外
搜索API
报表
数据推送
数据指标监控
静态内容采集
识别
规则2
进程监控
网络
数据处理
去重
结构化
数据队列
在线图表
组合
hbase集群
资源释放
solr集群
规则1
0 条评论
回复 删除
下一页
