数据采集与分析系统架构图
2022-06-14 10:19:24   6  举报             
     
         
 数据采集于分析系统架构图
    作者其他创作
 大纲/内容
 数据采集系统
    数据采集层
  系统管理
  Zookeeper
  实时计算
  基础设施服务分系统
  Mysql/Postgres关系型数据库
  战场环境数据汇交与分发分系统
                    移动介质拷贝
  数据分析
  Git自动化持续集成
  数据传输层
                    Logstash数据采集
  xxx 本地表
  统一认证管理
  数据订阅
  互联网数据采集后处理子系统
  系统常规业务数据
  监控预警
  数据传输系统
  网页解析子系统
  统一认证管理分系统
                         GoHangout数据采集
  DW数据仓库
  民方数据引接分系统
  xxx_all 分布式表
  战场环境数据发布与推送分系统
  监控与运维
  Spark/Flink流计算
  容器化部署
  数据批处理
  采集管理与任务调度子系统
  全网配置基线管理服务分系统
  互联网数据摆渡子系统
  综合业务监控分系统
                         Sqoop数据采集
  Redis高速缓存NoSql存储
  Kafka消息队列
  可视化展示
  应用服务层
                  互联网传输
  。。。
  clickhouse 按天分区及Shard分片存储
  Drools规则引擎
   
 
 
 
 
  0 条评论
 下一页
  
   
   
   
  
  
  
  
  
  
  
  
 