数据迁移
2017-01-16 21:42:21 0 举报
数据迁移是指将数据从一个存储系统或环境迁移到另一个的过程。这个过程可能涉及到将数据从一个数据库迁移到另一个数据库,或者从一个存储介质迁移到另一个存储介质。数据迁移通常需要精确和谨慎的操作,以确保数据的完整性和准确性不会在迁移过程中受到损害。此外,数据迁移还需要考虑数据的安全性和隐私性,以防止数据在迁移过程中被泄露或被未经授权的人员访问。数据迁移可以是一项复杂的任务,但通过使用专门的数据迁移工具和技术,可以大大简化这个过程。
作者其他创作
大纲/内容
是否为超过3个月订单,gmt_create判断
1 存放mysql订单表中的id和状态2 存放mysql订单表中整行数据和状态
验证mysql中间表和mysql线上表删除表数据一致性:导入odps对比
rowkey和索引设计
dts调度mysql订单表数据,根据中间表id+status,置中间表中对应status为1
1通过中间表中id,从mysql订单表中读取订单信息,并将数据转换为hbase的存储结构,保存到hbase2 直接将mysql 中间表中数据转换为hbase存储结构,保存到hbase中
是
mysql线上库
hbase表
否
通过精卫的全量迁移服务,将满足条件的订单迁移到中间表
验证mysql线上库和mysql中间表数据一致性:通过精卫的全量校验服务验证
验证mysql中间表和hbase表数据一致性:将数据通过同步中心导入到odps比对
mysql中间表id+status
0 条评论
下一页