Hadoop 迁移到阿里云MaxCompute 技术方案
环境进行业务对比验证,确定迁移的正确性。 迁移开展时,您可以选择部分试点业务迁移或全量业务进行迁移。对于规模较大的用户,建 议您选择部分试点业务先行进行迁移验证,待迁移验证通过后,再扩展更大的业务范围以降低迁 移风险、提高迁移质量。 5.3 阶段 3:并行测试,割接 迁移完成后,建议基于增量数据与当前系统进行并行测试,待并行一段时间后,对并行测试 结果进行对比验证,符合业务预期即可将业务全部切换至 上做 SQL 语法转换,参见 6.5.1.2。 3. 转换后的 SQL 会根据 workflow.xml 中的配置,自动生成项目空间下开发环境的工作流节 点。 4. 客户可以运行测试实例,验证后发布到生产环境。 7 经典用例 7.1 基本功能 7.1.1 准备工具和环境 预先下载好工具包:odps-data-carrier.zip Alibaba Cloud MaxCompute 此次我们要迁移的表为 database test 下名为 test 的表,该表的信息如下: 分区信息如下: 这两个分区中,每个分区中有 100 条数据 本次数据迁移验证环节会用到 MaxCompute 客户端 odpscmd,下载页面 7.1.2 解压工具包,并配置 MaxCompute 连接信息 执行:unzip odps-data-carrier0 码力 | 59 页 | 4.33 MB | 1 年前3
共 1 条
- 1