数据采集流程图
2018-08-20 19:23:00   0  举报             
     
         
 用户画像标签采集流程
    作者其他创作
 大纲/内容
 用户画像标签数据采集
    处理数据n
  用户基本信息标签
  openidappidunionidtag_valuetag_codebiz_datefromopt_typecreated_atupdated_at
  保存
  数据存储
  标签数据采集
  用户金融属性标签
  行为
  swoole采集任务2
  标签数据修复
  ...
  运行结果统计记录运行日志
  mysql
  处理数据2
  标签定义
  golang采集任务1
  业务数据源
  1:N 分发
  借款
  定性标签(规则类)
  处理数据1
  标签明细
  异常邮件报警异常任务自动重跑
  读取任务(kafka队列通信)消除语言,平台壁垒
  golang采集任务3
  monogdb
  openidappidunionidtag_1:value_1tag_2:value_2...created_atupdated_at
  保单
  生产标签数据到kafka 
  用户购买历史标签
  读数据
  生成的标签
  swoole多进程task任务+redis 进程间数据通信
  mongodb
  elasticsearch
  采集标签数据
  golang 接收kafka
  配置标签采集任务模块
  配置标签采集任务
  用户标签
  1.统计类标签2.规则类标签3.机械学习挖掘类标签
  用户渠道来源标签
  用户行为标签
   
 
 
 
 
  0 条评论
 下一页