OSS-HDFSは、OSS (Object Storage Service) バケットを使用して、OSS-HDFSデータとその補助データを格納します。 これらのデータはに格納される。バケットのdlsdata/ ディレクトリ。 使用済みストレージ容量に対して課金されます。
OSS-HDFSデータブロック
すべてのOSS-HDFSデータブロックは、OSSバケットのストレージ容量を占有します。 OSS-HDFSデータブロックは、使用される記憶容量の多くを占有する。 hdfs duコマンドを実行して、OSS-HDFSデータブロックが占有するストレージ容量を表示できます。
OSS-HDFSのチェックサムデータ
OSS-HDFSは、Hadoop分散ファイルシステム (HDFS) チェックサム機能をサポートしています。 データが書き込まれると、追加のチェックサムデータが生成される。 オープンソースのHDFSチェックサムデータはデータノードのディスク容量を占有し、OSS-HDFSチェックサムデータはOSSバケットのストレージ容量を占有します。
デフォルトでは、通常のデータ書き込みでは、512バイトごとに4バイトのチェックサムが生成されます。 小さなファイルまたは小さなデータブロックが書き込まれると、チェックサムデータはより大きくなる可能性があり、これは正常です。
チェックサムデータのストレージ容量使用量は、標準バケットのストレージ容量使用量に分類されます。 hdfs duコマンドを実行して、チェックサムデータのストレージ容量使用量を計算およびクエリすることはできOSS-HDFSん。
OSS-HDFSファイルホール
特定のシナリオでは、OSS-HDFSクライアントを使用してオブジェクトをランダムに上書きおよび変更できます。 データブロックは変更できません。 システムは、デルタモードでオブジェクトにデータを書き込むか、オブジェクトを変更する必要があります。 この場合、ファイルに書き込まれないゼロからなるファイルホールが生成されてもよい。 オブジェクトをデルタファイルモードで書き込みまたは変更すると、追加のストレージ容量が占有されます。
ファイルホールのストレージ容量使用量は、標準バケットのストレージ容量使用量に計算されます。 hdfs duコマンドを実行して、OSS-HDFSのファイルホールのストレージ容量使用量を計算およびクエリすることはできません。
OSS-HDFSの監査ログ
オブジェクトに対するOSS-HDFSの読み取りおよび書き込み操作は、監査ログに記録されます。 監査ログはバケットに保存され、ストレージ容量を占有します。 監査ログは、OSS-HDFSの /.sysinfoディレクトリに保存されます。 hdfs duコマンドを実行して、監査ログのストレージ容量使用量を照会できOSS-HDFS。
OSS-HDFSインベントリリスト
OSS-HDFSは、在庫リストのエクスポートをサポートしています。 在庫リストはバケットに格納され、ストレージ容量を占有します。 インベントリリストは、OSS-HDFSの /.sysinfoディレクトリに保存されます。 hdfs duコマンドを実行して、OSS-HDFSのインベントリリストのストレージ容量使用量を照会できます。
OSS-HDFSのゴミ箱
OSS-HDFSのゴミ箱内のオブジェクトは、指定された保存期間が終了してストレージ容量を占有する前にOSS-HDFSシステムから削除されません。 hdfs duコマンドを実行して、ゴミ箱のストレージ容量使用量を照会できOSS-HDFS。
OSS-HDFS内部データ
OSS-HDFSは、OSSバケットを使用して、非同期タスク情報などのデータを一時的に保存します。 一時的に保存されたデータは、1 GB未満のストレージ容量を占有します。
OSS-HDFS内部データは、標準バケットのストレージ容量使用量に計算されます。 hdfs duコマンドを実行して、内部使用量の計算とクエリを実行OSS-HDFSことはできません。