ここでは、サービス接続、SDK、ツール、クラウドデータの移行など、MaxCompute システムデータのアップロードとダウンロード処理の概要を紹介します。

MaxCompute システムにアクセスするには、DataHub のリアルタイムデータトンネル機能または Tunnel のバッチデータトンネル機能を使用します。

DataHub と Tunnel は、どちらも独自の SDK を実装しています。 SDK および派生データのアップロードとダウンロードツールは、さまざまなシナリオでのデータのアップロードおよびダウンロード要件を満たすことができます。

データのアップロードツールとダウンロードツールには、DataWorks、DTS、OGG プラグイン、Sqoop、Flume プラグイン、Logstash プラグイン、Fluentd プラグイン、Kettle プラグイン、MaxCompute コンソールなどがあります。

これらのツールで使用される基盤のデータトンネルは、次の通りです。
  • DataHub トンネルツール
    • OGG
    • Flume
    • LogStash
    • Fluentd
  • Tunnel ツール
    • DataWorks
    • DTS
    • Sqoop
    • Kettle
    • MaxCompute コンソール

幅広いデータのアップロードとダウンロードツールは、ほとんどのクラウドデータ移行シナリオに適用可能です。 各種ツール、Hadoop データ移行、データベースデータの同期化、ログ収集などのクラウド移行シナリオについては、他のドキュメントで紹介します。 技術的ソリューションを選択する際に、これらのドキュメントをご参照ください。