canal实现mysql同步到mysql
2022-08-29 16:45:31 22 举报
登录查看完整内容
为你推荐
查看更多
canal实现mysql同步到mysql，并进行数据分析的架构流程
作者其他创作
大纲/内容
是否接收到数据变更
查询所有需要初始化的数据
项目启动:判断需不需要初始化指定的表
组装查询到的数据
组装CRUD-sql
查询聚合数据
需要
执行存储增量的、变更的或者删除的基础表的数据
数据存储
分析结果回显给页面展示等
开始
查询所有需要初始化的数据，进行数据处理入库
更新最新执行记录表信息
源mysql
进行指标分析
启动canal数据同步到目标mysql机制
分析系统数据同步架构
更新指标分析结果存储表
目标mysql
数据存储到目标mysql
不需要
否
查询源数据
是
更新聚合分析表
定时读取源数据吐到canal的数据
更新任务执行记录表
定时分析数据指标
数据同步分析服务
结束
启动全局数据分析（mysql源）定时任务
收藏
0 条评论
回复 删除
下一页
