迁移详细步骤
2021-07-01 14:22:43 0 举报迁移详细步骤
作者其他创作
大纲/内容
库表
用户自定义包
脚本
计算任务
导出待迁移的管道任务
任务依赖关系
jsm
权限申请
导出待迁移的用户IDE 个人数据/文件/镜像
回流任务
确认 科技 > 中台（集群/核心系统）网络环境
接入/推送任务
函数账号库表权限
账号
导出全量的工程
跨集群校验
关联质量规则
拉链任务
导入稽核规则
按需导出执行账号
任务和表的关系
接入/推送配置
导入队列配置
导入用户/系统 jar 到hdfs
文件MD5
ugdap
工具校验
导入系统镜像
关联任务
导入用户脚本/软件包
新建集市
最高优先级
同步任务
权限
ns初始化
数据标准
必选
业务协同校验
按需导出待迁移的模型
关联账号，队列，集市
队列
按需导出待迁移的队列信息
数据验证
确认服务器到位，服务器规格&环境符合要求
导入hive mestore 数据
任务脚本
按需导出hdfs公共目录
关联项目空间
计算任务配置
按需导出ns配额
同集群数据校验
数据内容关联比对
项目空间业务层级规划
其他数据源
整表数据MD5
迁移准备
调度
调度节点
关联项目空间、账号、队列
导出用户/系统 jar
执行账号创建
业务板块初始化
模型分组/建模标准
实时任务
IDE平台
表管理-增量变更
按需导出待迁移的任务
任务运行
任务配置
数据源管理/数据集成
dms
公共目录初始化
导入数据源
确认调度节初始化
数据质量平台
权限管理-增量变更
导入任务
同步历史数据
函数
项目空间初始化
可选
跨集群数据同步任务
行列求和计算
平台抽样校验
调度节点初始化
mysql数据源
熔断/告警
管道配置
项目空间
迁移过程
文件管理
按需导出待迁移的hive metastore 元数据
库表信息
按需导出待迁移的数据源
关联调度节点
hadoop集群
关联业务线
新建业务线
0 条评论
下一页
