概要

EMRを使用すると、Hadoop、Spark、Flink、Kafka、HBaseなどのエンタープライズレベルのオープンソースビッグデータサービスを簡単にデプロイできます。

• EMRのすべてのコンポーネントはオープンソースです。EMRはオープンソースコンポーネントに適応および最適化し、コンポーネントのオープンソースバージョンよりも高いパフォーマンスを提供します。

• プリエンプティブインスタンスは、時間ベースの自動スケーリング機能に基づいてコストを削減するのに役立ちます。

• コンピューティングとストレージは分離されており、リソースの弾力的使用をサポートしています。

• 数分でクラスターを作成またはスケールアウトできます。サービスを手動でデプロイまたは起動する必要はありません。

EMR Serverless Spark

• 超高速でデータを計算するクラウドネイティブコンピューティングエンジン

  • 組み込みのFusion Engine（旧Spark Native Engine）により、オープンソース Spark より 300% 高いパフォーマンスを実現します。

  • 組み込みのCeleborn（旧Remote Shuffle Service）は、ペタバイト単位のシャッフルデータをサポートします。これにより、コンピューティングリソースの総コストが最大 30% 削減されます。

• オープンデータレイクアーキテクチャ

  • コンピューティングとストレージの分離、スケーラブルなコンピューティングリソース、従量課金制ストレージがサポートされています。

  • このサービスは OSS-HDFS と統合されており、HDFS のクラウドストレージと完全に互換性があります。これにより、ビジネスをシームレスにクラウドに移行できます。

  • データレイクとデータウェアハウスのメタデータを統合するために、一元化された DLF メタデータサービスが提供されます。

• エンドツーエンドの開発

  • ジョブの開発、デバッグ、公開、スケジューリングを網羅したエンドツーエンドのデータ開発がサポートされています。

  • 開発環境と本番環境間の組み込みバージョン管理と分離がサポートされており、開発と公開に関する企業標準を満たしています。

• サーバーレスリソースプラットフォーム

  • すぐに使えるサービスにより、クラウドインフラストラクチャを手動で管理および保守する必要がなくなります。

  • リソースは自動的にスケーリングされ、数秒以内に提供されます。

  • コンピューティングリソースは、従量課金制で課金されます。これにより、リソースの総コストが削減されます。