常德信用数据采集逻辑
2019-10-09 17:19:39 0 举报调用天眼查数据采集逻辑
作者其他创作
大纲/内容
按企业循环调用所有激活的天眼查接口数据
采集数据
有企业集合
无企业集合数，跳出任务
循环调用企业企业基本信息接判断企业名是否正确
按企业循环调用定义为7天采集一次的接口天眼查接口数据
错误，跳出循环到下一个企业
进行下一个企业循环
获取从未采集过数据且在园区且未采集的企业
名称正确
有数据
按企业循环调用定义为30天采集一次的天眼查接口数据
每天执行月异动任务
判断接口是否采集到了数据是否为有数据
按企业循环将对应的接口json数据存入数据日志表
完成采集
循环到下一个接口
删除原有数据并将日志表中json数据解析插入到本业务表
获取7天前未更新且在园区且已采集的企业
删除本企业本表业务数据
判断是否是否在园区且已采集
获取30天未采集且在园区且已采集的企业
每天执行7天异动任务
无数据
每天执行全量任务
收藏
收藏
0 条评论
下一页
