Hadoop 迁移到阿里云MaxCompute 技术方案................................................................................. 18 4.2.2 数据迁移自动化 .................................................................................................. 分析与报表:对数据进行分析和展现以获取洞察。如 BI 工具、jupyter 等。 数据作业编排:将多个数据处理动作(数据移动、处理转换等)编排成为工作流并周期性地 执行以实现数据处理工作的自动化。如 Apache Oozie、Sqoop 等。 2.1.2 开源大数据组件架构 Alibaba Cloud MaxCompute 解决方案 9 2.1.3 阿里云大数据组件架构 量、预估迁 移后的成本,从而对迁移工作进行整体评估和决策。 4.2.2 数据迁移自动化 利用迁移工具,可以对 Hive Meta 及数据进行检测扫描,自动在 MaxCompute 创建对应 的 Meta,同时根据不同的网络环境,用户可选择多种数据迁移上云的方案,迁移工具提供了对 应的数据迁移自动化工具,能够将 Hive 的数据自动转换并高吞吐地加载到 MaxCompute 上, 支持从0 码力 | 59 页 | 4.33 MB | 1 年前3
共 1 条
- 1













