Hadoop 迁移到阿里云MaxCompute 技术方案
配套的数据同步、作业开发、工作流编排调度、作业运维 及诊断工具。开源社区常见的 Sqoop、Kettle、Ozzie 等 实现数据同步和调度。 整体 不是孤立的功能,完整的企 业服务 不需要多组件集成、调优、定制,开箱即用。 3 MaxCompute 迁移场景分析 3.1 迁移基于 Hadoop 的数据湖/数据仓库业务负载 根据 MaxCompute 产品的定位和特性,您可以将基于 Hadoop Alibaba Cloud MaxCompute 解决方案 34 5. ODPS DDL 创建好以后,odps_ddl_runner.py 将会遍历 meta-processor 生成的目录,调 用 odpscmd 自动创建 ODPS 表与分区。 Alibaba Cloud MaxCompute 解决方案 35 【注意】:odps_ddl_runner.py 需要依赖0 码力 | 59 页 | 4.33 MB | 1 年前3
共 1 条
- 1