Hadoop 迁移到阿里云MaxCompute 技术方案MaxCopute 产品面向 Hadoop 用户提供配套的搬迁工具 MaxCompute Migration Assist(简称 MMA),利用该工具帮助用户进行迁移事前评估、利用工具加速迁移进程并降低迁 移风险。 4.1.1 工具覆盖的场景: 工作负载 Hadoop 开源生态 MaxCompute 产品组件/MaxCompute 生态工具 批处理 Hive SQL MaxCompute 环境进行业务对比验证,确定迁移的正确性。 迁移开展时,您可以选择部分试点业务迁移或全量业务进行迁移。对于规模较大的用户,建 议您选择部分试点业务先行进行迁移验证,待迁移验证通过后,再扩展更大的业务范围以降低迁 移风险、提高迁移质量。 5.3 阶段 3:并行测试,割接 迁移完成后,建议基于增量数据与当前系统进行并行测试,待并行一段时间后,对并行测试 结果进行对比验证,符合业务预期即可将业务全部切换至 MaxCompute 3.3.1 使用 MMA Agent 获得评估报告: 报告中将搬站风险分为两档,高风险(HIGH RISK)与中等风险(MODERATE RISK)。高风险 意味着必须人工介入,例如出现了表名冲突, ODPS 完全不支持的类型等问题。中等风险意 味着迁移过程中可以自动处理,但是需要告知用户的潜在风险,例如 Hive 数据类型到 ODPS 数据类型会带来的精度损失等问题。以下是一个报告的例子:0 码力 | 59 页 | 4.33 MB | 1 年前3
共 1 条
- 1













