Hadoop 迁移到阿里云MaxCompute 技术方案................................................. 50 7.1.8 运行 hive_udtf_sql_runner.py,将 hive 的数据同步到 odps ........................................ 51 7.2 进阶功能..................................... 统一的命令行工具和 JAVA/PYTHON SDK 开发&诊断 Dataworks/Studio/Logview 配套的数据同步、作业开发、工作流编排调度、作业运维 及诊断工具。开源社区常见的 Sqoop、Kettle、Ozzie 等 实现数据同步和调度。 整体 不是孤立的功能,完整的企 业服务 不需要多组件集成、调优、定制,开箱即用。 3 MaxCompute 迁移场景分析 上传完成后,Dataworks 服务会根据 ODPS DDL 批量生成 MaxCompute 的 table。 6. MaxCompute 的表创建完成后,Dataworks 服务会自动拉起 DataX 的数据同步任务,完成 批量数据迁移。 Alibaba Cloud MaxCompute 解决方案 38 6.4.3.2 Dataworks 项目描述文档的目录结构及说明: Alibaba0 码力 | 59 页 | 4.33 MB | 1 年前3
共 1 条
- 1













