社区数据采集项目业务梳理
2024-09-28 21:33:43   3  举报             
     
         
 项目架构梳理
    作者其他创作
 大纲/内容
 web
  data-processor
  topic=缓存同步
  KAFKA集群
  结构化数据表(InnoDB)
  定时清理数据,保留1个月的数据
  数据采集服务集群
  ······
  规则查询
  人脸库服务集群
  数据分段并发控制权限
  数据处理服务集群
  face-provider
  data-collector
  数据查询
  规则配置
  原始数据表(MyISAM)
  rule-config(规则配置服务,单节点)
  数据处理并保存
  Redis
  配置CRUD
  topic=数据采集
  规则配置表(InnoDB)
  MySQL
  人脸查询、比对
  消费原始数据
  RPC 查询看有无此人
  人脸库
  数据添加
   
 
 
 
 
  0 条评论
 下一页
  
   
   
   
   
  
  
  
  
  
  
  
  
 