Hadoop 迁移到阿里云MaxCompute 技术方案
的数据湖/数据仓库业务负载 ......................................................................... 15 3.2 不同的网络环境及部署形态迁移 .............................................................................................. 内建支持的上百种机器学习算法,目前 MaxCompute 的机器学习能力由 PAI 产品进行统一提供 服务,同时 PAI 提供了深度学习框架、Notebook 开发 环境、GPU 计算资源、模型在线部署的弹性预测服务。 MaxCompute 的数据对 PAI 产品无缝集成。 存储 Pangu 阿里自研分布式存储服务,类似 HDFS。MaxCompute 对外目前只暴露表接口,不能直接访问文件系统。 MaxCompute 解决方案 17 数据开发 HUE 或自研数据开发工具 Datawroks Studio 3.2 不同的网络环境及部署形态迁移 MaxCompute 提供了迁移工具,支持用户迁移来自不同网络环境及部署形态的 Hadoop 业务负 载,包括: IDC 自建 Hadoop 集群 阿里云上基于 ECS 自建 Hadoop 集群 友商的0 码力 | 59 页 | 4.33 MB | 1 年前3Curve核心组件之mds – 网易数帆
pool: 用于实现对机器资源进行物理隔离,server不能跨 Pool交互。运维上,建议以pool为单元进行物理资源的扩 容。 • zone: 故障隔离的基本单元,一般来说属于不同zone的机 器至少是部署在不同的机架,一个server必须归属于一个 zone。 • server: 用于抽象描述一台物理服务器,chunkserver必须 归属一个于server。 • Chunkserver: 用于抽象描述物理服务器上的一块物理磁盘0 码力 | 23 页 | 1.74 MB | 5 月前3
共 2 条
- 1