Apsara File Storage for HDFSは、Alibaba Cloud ECSインスタンスやContainer serviceなどのコンピューティングリソース用のファイルストレージサービスです。 Hadoop分散ファイルシステムと同じ方法で、Apsara File storage for HDFSのデータを管理およびアクセスできます。 ビッグデータ分析アプリケーションを変更することなく、Apsara File Storage for HDFSを使用できます。 Apsara File Storage for HDFSは、無制限の容量、パフォーマンススケーリング、独自の名前空間、マルチパーティ共有、高信頼性、高可用性を提供します。
シナリオ
Apsaraファイルストレージは、ビッグデータ分析や機械学習など、高スループットが必要なシナリオに適しています。 Apsara File Storage for HDFSは、高スループットおよび低レイテンシーのアクセスをサポートします。 ローカルコンピューティングリソースにデータを移行する必要はありません。
Apsara File Storage for HDFSにデータが保存された後、ECSインスタンスまたはその他のコンピューティングリソースは直接データにアクセスできます。 Hadoopまたはその他の機械学習アプリケーションを複数のコンピューティングリソースにデプロイして、Hadoopfs操作を使用してオンラインまたはオフラインコンピューティングを実行することで、アプリケーションがApsara File Storage for HDFSのデータにアクセスできるようにすることができます。 コンピューティング結果をApsara File Storage for HDFSにエクスポートして、結果を永続的に保存することもできます。
パフォーマンス
HDFSのApsaraファイルストレージのパフォーマンスは、スループットによって測定されます。 Apsara File Storage for HDFSファイルシステムの実際のスループットは、ファイルシステムが接続されているECSインスタンスの最大帯域幅を超えることはできません。 たとえば、ECSインスタンスの帯域幅が1.5 Gbit/sの場合、ファイルシステムのスループットは最大187.5 Mbit/sに達する可能性があります。 HDFSファイルシステムのApsaraファイルストレージのスループットは、ファイルシステムの容量によって異なります。
データの耐久性とサービスの可用性
Apsara File Storage NASと同様に、Apsara File Storage for HDFSは、ファイルシステムに保存されているデータごとに複数のレプリカを提供します。 これらのレプリカは、地理的冗長性のために異なる障害ドメインにわたって分離されたデバイスに存在する。 Apsara File Storage for HDFSは、99.999999999% (11 9) のデータ信頼性を提供します。 これにより、多数のデータセキュリティリスクが軽減されます。
スケーラビリティと弾力性
Apsara File Storage for HDFSは、高スループット、高IOPS、低レイテンシなどの最適なストレージパフォーマンスをアプリケーションに提供します。 さらに、パフォーマンスと容量の線形関係は、ビジネスの成長時に容量とストレージパフォーマンスに関する要件を満たすことができます。
セキュリティ
Apsara File Storage for HDFSは、複数のセキュリティメカニズムを使用して、ファイルシステムに保存されているデータのセキュリティを保証します。 これらのセキュリティメカニズムには、VPCに基づくネットワーク分離、クラシックネットワークでのユーザー分離、ファイルシステムの標準的な権限制御、セキュリティグループに基づくアクセス制御、RAMユーザー認証が含まれます。
操作
Apsara File Storage for HDFSは、ファイルシステムおよび管理システム用のSDKを提供します。 パブリックプレビューでは、ファイルシステムのSDKのみが提供されます。 管理操作は、Apsara File Storage for HDFSコンソールで実行できます。 Apsara File Storage for HDFS SDK for Javaは、Hadoop分散ファイルシステムに基づく操作を実装して、Hadoop互換ファイルシステムを提供します。 SDKは、次の形式のJARファイルとして提供されaliyun-sdk-dfs-x.y.z.jar。 MapReduce、Hive、Spark、FlinkなどのApache Hadoopベースのコンピューティングおよび分析アプリケーションは、SDKを使用して、元のHDFSよりも優れた機能とパフォーマンスのためにコードを変更およびコンパイルすることなく、デフォルトのファイルシステムとしてApsara File Storage for HDFSを使用できます。
グラフィカルwebアプリケーションをご希望の場合は、コンソールを使用して、HDFSファイルシステム用のApsara File Storageを管理できます。
コストモデル
Apsara File Storage for HDFSは、ファイルシステムの容量と事前設定されたスループットに基づいて課金されます。 デフォルトでは、Apsara File Storage for HDFSは、使用したリソースに基づいて時間単位で課金されます (従量課金) 。 リソースプラン (サブスクリプション) を事前に購入して、追加の割引を受けることもできます。