风控集成基建数据中台数据
2022-10-09 09:57:56 2 举报
登录查看完整内容
为你推荐
查看更多
风控集成基建数据中台数据
作者其他创作
大纲/内容
单位、人员、字典等转换成风控对应数据
调用数据中台rest接口查询上次同步时间到当前时间数据总数
是
保存入库
查询同步表记录的数据同步时间
结束
是否遍历完所有数据
数据是否存在
500分批查询主表数据，时间条件同上
开始
是否校验通过
同步表记录当前同步时间
是否取到数据
否
数据中台
异常数据重新处理任务启动
20条一批捞取异常数据，状态已整改
查询任务表记录的数据同步时间
风控集成基建数据
是否处理成功
是否能取到数据
500分批查询总部表数据，时间条件同上
数据中台调度
查询上当前时间之前数据总数
保存到数据异常表
异常数据补发（后续）
遍历每一条数据
是否处理完所有数据
统推风控适配服务
执行shell脚本，运行main方法
查询从表数据完善信息，只拼装原始数据，不做转换
存入数据中台总部表
调用数据中台rest接口查询上当前时间之前数据总数
校验数据完整性
数据是否对应成功
查询上次同步时间到当前时间数据总数
遍历数据
任务表记录当前同步时间
记录错误原因信息，状态失败
读取jar包配置文件中E基建数据源和总部数据源配置
0 条评论
回复 删除
下一页
