Hadoop 迁移到阿里云MaxCompute 技术方案
使用时,存储与计算解耦,不需要仅仅为了存储扩大不必 要的计算资源 SQL MaxCompute SQL TPC-DS 100% 支持,同时语法高度兼容 Hive,有 Hive 背景开发者直接上手,特别在大数据规模下性能强大。 * 完全自主开发的 compiler,语言功能开发更灵活,迭 代快,语法语义检查更加灵活高效 * 基于代价的优化器,更智能,更强大,更适合复杂的查 6.5.1 Hive SQL -> MaxCompute SQL 自动转换 6.5.1.1 使用 sql-checker 做语法检查 Agent 提供 SQL 语法检查的工具,可以帮助开发者自助的对 Hive SQL 做语法检查,并且对于 不兼容的语法,sql-checker 会输出所有的语法和语义问题,并给出修改建议。 Alibaba Cloud MaxCompute 解决方案 包可直接运行,参照《MaxCompute Spark 开发指南》第二节准备开发环境和修改配置。注意,对于 spark 或 hadoop 的依赖必须设成 provided。 Alibaba Cloud MaxCompute 解决方案 44 2. 【作业需要访问 MaxCompute 表】参考《MaxCompute Spark 开发指南》第三节编译 datasource 并安装到本地 maven0 码力 | 59 页 | 4.33 MB | 1 年前3
共 1 条
- 1