hadoop数据迁移

2024-09-19 19:02:03 数码大全

如何进行Hadoop数据迁移

如何进行Hadoop数据迁移

您可使用MMA、Sqoop和DataWorks进行Hadoop数据迁移。

使用DataWorks结合DataX进行Hadoop数据迁移的示例请参见Hadoop数据迁移新手教程,或参见视频教程Hadoop数据迁移到MaxCompute最佳实践。 Sqoop执行时,会在原来的Hadoop集群上执行MR作业,可以分布式地将数据传输到MaxCompute上,详情请参见Sqoop工具的介绍。 MMA利用Meta Carrier连接您的Hive Metastore服务,抓取Hive Metadata,并利用这些数据生成用于创建MaxComputer表和分区的DDL语句以及用于迁移数据的Hive UDTF SQL。详细信息请参见MMA迁移概述。

版权说明: 本文版权归原作者所有,转载文章仅为传播更多信息之目的,如作者信息标记有误,请第一时间联系我们修改或删除,多谢。