このトピックでは、Alibaba Cloud DataWorks について (機能と制限を含む) 説明します。

DataWorksは、Alibaba Cloud の重要な platform as a service (PaaS) です。 Data Integration 、 DataStudio、 データマップ 、 データ品質 、DataService Studio などのオールラウンドなサービスを提供しています。 さらに、企業がデータの価値を採掘および調査するのに役立つ、ワンストップのデータ開発および管理コンソールを提供します。

DataWorks は、次のような複数のコンピューティングエンジンとストレージエンジンをサポートしています：MaxCompute 、 E-MapReduce 、 Realtime Compute、Machine Learning Platform for AI、Graph Compute、Hologres。 また、カスタムコンピューティングおよびストレージサービスを使用することもできます。 ワンストッププラットフォームである DataWorks は、エンドツーエンドビッグデータサービス、人工知能 (AI) 開発、データガバナンスを提供しています。

DataWorks は、データ送信、変換、統合を簡素化します。 さまざまなデータストアからデータをインポートし、データを変換、分析、処理してから、他のデータシステムにデータを送信できます。アーキテクチャ

機能

  • DataWorks はクラウドでホスティングされている環境です。
    • DataWorks はパワフルなスケジュール機能を提供します。 詳細は、「スケジュール」をご参照ください。
      • DataWorks では、ノードは時間ベースまたは依存関係ベースのスケジューリング構成によってトリガーできます。 詳細については、「スケジューリングプロパティ」および「依存関係」をご参照ください。
      • DataWorks を使用すると、有向非巡回グラフ (DAG) のノード関係に基づいて、数千万のノードを毎日正確に時間どおりに実行できます。
      • DataWorks は、分、時間、日、週、または月単位のカスタム間隔でのノードの実行をサポートしています。
    • DataWorks はクラウドでホスティングされている環境であり、サーバーの展開を不要にします。
    • DataWorks は、異なるテナントのノードが相互に影響しないことを保証する分離機能を提供します。
  • DataWorks は、バッチ同期ノード 、 シェルノード 、 ODPS SQL ノード 、ODPS MR ノード などの複数のノードタイプをサポートしています。 ノード間の依存関係に基づいて、複雑なデータを分析および処理します。
    • データ変換：MaxCompute の強力なコンピューティング機能を使用することにより、DataWorks はビッグデータの分析と処理において優れたパフォーマンスを保証します。
    • データ同期：Data Intergration の強力なサポートにより、DataWorks は 20 種類以上の接続をサポートし、安定した効率的なデータ転送機能を提供します。
  • DataWorks は、視覚化されたコード開発を提供します。

    DataWorks は、視覚化されたコード開発およびワークフローデザイナーページを提供します。 開発ツールを使用せずに、簡単なドラッグアンドドロップ操作で複雑なデータ分析ノードを開発できます。 詳細については、「GUI 要素」をご参照ください。 インターネットにアクセスできるブラウザを使用すれば、場所や時間を問わずコードを開発できます。

  • DataWorks はモニタリングとアラームをサポートしています。

    オペレーションセンターは、視覚化されたノードのモニタリングおよび管理ツールを提供し、DAG でノード全体の実行ステータスを表示します。

    さまざまなアラーム通知方法を簡単に構成して、ノードエラーが発生したときに関連するスタッフに迅速に通知できます。 これにより、通常のビジネス運用が保証されます。

制限事項

  • DataWorks は Google Chrome 69 以降のみをサポートしています。
  • 現在、DataWorks は MaxCompute SQL 操作のみをサポートしています。

アップグレード

DataWorks のアップグレードは自動的に適用され、現在のユーザーへの影響はありません。