MaxCompute プラットフォームのデータのアップロードツールとダウンロードツール は、さまざまなクラウド データの移行シナリオに適用できます。 本ページでは、いくつかの一般的なシナリオを紹介します。
Hadoop のデータ移行
Hadoopのデータ移行には、SqoopまたはDataWorksを使用できます。
- Sqoop では、MR ジョブが元の Hadoop クラスタ上で実行されるため、効率的なMaxCompute への分散データ転送が実現します。 詳細は、「Sqoop ツールの概要(Sqoop tool introduction)」をご参照ください。
-
DataWorks と DataX を一緒に使用すると、Hadoop データを移行できます。
データベースの同期
MaxCompute にデータベースのデータを同期するには、データベースの種類と同期ルールに基づいて、適切なツールを選択する必要があります。
ログ収集
ログ収集には、Flume、Fluentd、Logstash ツールを使用します。