すべてのプロダクト
Search
ドキュメントセンター

Object Storage Service:再開可能ダウンロード

最終更新日:Nov 07, 2024

サイズが5 GBを超える大きなオブジェクトをobject Storage Service (OSS) からローカルコンピューターにダウンロードすると、ネットワークの中断やプログラムのクラッシュにより、オブジェクトのダウンロードに失敗することがあります。 複数回の再試行後にオブジェクトのダウンロードに失敗した場合、再開可能なダウンロードを実行してラージオブジェクトをダウンロードできます。 オブジェクトを複数のパーツに分割し、パーツを並行してダウンロードして、ダウンロードを高速化できます。 再開可能なダウンロード中、ダウンロードの進行状況はチェックポイントファイルに記録されます。 パーツのダウンロードに失敗した場合、次のダウンロードはチェックポイントファイルに記録されている位置から開始されます。 すべてのパーツがダウンロードされると、すべてのパーツが完全なオブジェクトに結合されます。

使用上の注意

  • このトピックでは、中国 (杭州) リージョンのパブリックエンドポイントを使用します。 OSSと同じリージョンにある他のAlibaba CloudサービスからOSSにアクセスする場合は、内部エンドポイントを使用します。 OSSリージョンとエンドポイントの詳細については、「リージョン、エンドポイント、オープンポート」をご参照ください。

  • このトピックでは、アクセス資格情報は環境変数から取得します。 アクセス資格情報の設定方法の詳細については、「アクセス資格情報の設定」をご参照ください。

  • このトピックでは、OSSエンドポイントを使用してOSSClientインスタンスを作成します。 カスタムドメイン名またはSTS (Security Token Service) を使用してOSSClientインスタンスを作成する場合は、「初期化」をご参照ください。

  • 再開可能ダウンロードを使用するには、oss:GetObject権限が必要です。 詳細については、「RAMユーザーへのカスタムポリシーのアタッチ」をご参照ください。

  • 再開可能なダウンロード中、ダウンロードの進行状況はチェックポイントファイルに記録されます。 パーツのダウンロードに失敗した場合、次のダウンロードはチェックポイントファイルに記録されている位置から開始されます。 チェックポイントファイルは、再開可能なダウンロードが完了すると削除されます。

  • OSS SDK for Goは、ダウンロードの進行状況をチェックポイントファイルに記録します。 チェックポイントファイルへの書き込み権限があることを確認してください。

  • チェックポイントファイルに含まれるチェックサムは変更できません。 チェックポイントファイルが破損している場合は、すべてのパーツを再度ダウンロードする必要があります。

  • オブジェクトのETagに一貫性がない場合、またはダウンロード中にパーツが失われたり変更されたりした場合は、オブジェクトを再度ダウンロードする必要があります。

package main

import (
	"fmt"
	"os"

	"github.com/aliyun/aliyun-oss-go-sdk/oss"
)

func main() {
	/// Obtain access credentials from environment variables. Before you run the sample code, make sure that the OSS_ACCESS_KEY_ID and OSS_ACCESS_KEY_SECRET environment variables are configured. 
	provider, err := oss.NewEnvironmentVariableCredentialsProvider()
	if err != nil {
		fmt.Println("Error:", err)
		os.Exit(-1)
	}

	// Create an OSSClient instance. 
        // Specify the endpoint of the region in which the bucket is located. For example, if the bucket is located in the China (Hangzhou) region, set the endpoint to https://oss-cn-hangzhou.aliyuncs.com. Specify your actual endpoint. 
	// Specify the region in which the bucket is located. For example, if the bucket is located in the China (Hangzhou) region, set the region to cn-hangzhou. Specify the actual region.
	clientOptions := []oss.ClientOption{oss.SetCredentialsProvider(&provider)}
	clientOptions = append(clientOptions, oss.Region("yourRegion"))
	// Specify the version of the signature algorithm.
	clientOptions = append(clientOptions, oss.AuthVersion(oss.AuthV4))
	client, err := oss.New("yourEndpoint", "", "", clientOptions...)
	if err != nil {
		fmt.Println("Error:", err)
		os.Exit(-1)
	}

	// Specify the name of the bucket. Example: examplebucket. 
	bucket, err := client.Bucket("examplebucket")
	if err != nil {
		fmt.Println("Error:", err)
		os.Exit(-1)
	}

	// Specify the full path of the object. Do not include the bucket name in the full path. Example: exampledir/exampleobject.txt. 
        // Specify the full path of the local file. Example: D:\\localpath\\examplefile.txt. If you do not specify the path of the local file, the downloaded object is saved to the path of the project to which the sample program belongs. 
        // Set the size of each part that you want to download to 100 KB (100 x 1024) and set the number of concurrent download parts to 3. 
        // oss.Checkpoint(true, "") Specify that resumable download is enabled. By default, the checkpoint file and the downloaded object are stored in the same directory and share the same name. However, the extension of the checkpoint file is .temp. You can also use oss.Checkpoint(true, "your-cp-file.temp") to specify the name of the checkpoint file. 
	err = bucket.DownloadFile("file.zip", "D:\\file.zip", 100*1024, oss.Routines(3), oss.Checkpoint(true, ""))
	if err != nil {
		fmt.Println("Error:", err)
		os.Exit(-1)
	}
}

関連ドキュメント

  • 再開可能ダウンロードの実行に使用される完全なサンプルコードについては、『GitHub』をご参照ください。

  • 再開可能ダウンロードを実行するために呼び出すことができるAPI操作の詳細については、「GetObject」をご参照ください。