词条同步流程图
2022-04-11 17:13:22 3 举报
登录查看完整内容
词条同步流程图
作者其他创作
大纲/内容
是
分页数据，每次返回15条标准问法数据
否
是否存在
删除对应标准问法
数据存储
根据docid查询智齿相似问法接口
查询indexInfo表中的数据
词条同步逻辑
同步数据进入es
通过fileId查询robotstandard对象
初始化es对象esBo
新增标准问法
排除词条无用文档
根据questionid查询数据库标准问法数据
注：之前的逻辑是标准问法和相似文档都是独立的数据，在2022-4-08号之后修改为：所有的相似问法的标题作为一个文本存储到标准问法的一个变量label中，作为es查询的字段
修改时间是否相等
调用智齿标准问法查询接口
同步开始（每天凌晨0点10分）
数据加载进es
数据同步逻辑同上
数据插入es
删除智齿中未同步过来的数据
是否停用
标准问法查询
查询标准问法表RobotStandard表
由于智齿删除数据不会同步，所以判断当天同步的数据进行差集，然后删除并备份
根据标准问法查询相似问法
词条数据处理
根据产品线查询智齿接口
根据产品线删除es词条中的数据
修改标准问法
一共9条产品，开9个线程同时跑数据
0 条评论
回复 删除
下一页
