Data Online Migration:移行の実装

使用上の注意

• データオンライン移行は、ソースデータアドレスのストレージサービスプロバイダーが提供するパブリックインターフェイスを使用してソースデータアドレスにアクセスします。このアクセス動作は、ストレージサービスプロバイダーのインターフェイス実装に依存します。

• データオンライン移行を移行に使用すると、ソースと宛先のデータアドレスでリソースが消費されます。これにより、ビジネスが中断される可能性があります。業務継続性を確保するため、慎重な評価の後、移行タスクのスロットリングを有効にするか、オフピーク時に移行タスクを実行することをお勧めします。

• 移行タスクが開始される前に、データオンライン移行はソースと宛先のデータアドレスにあるファイルを確認します。ソースデータアドレスのファイルと宛先データアドレスのファイルの名前が同じで、移行タスクの [ファイルの上書き方法] パラメーターが [はい] に設定されている場合、移行中に宛先データアドレスのファイルは上書きされます。2 つのファイルに異なる情報が含まれており、宛先データアドレスのファイルを保持する必要がある場合は、一方のファイルの名前を変更するか、宛先データアドレスのファイルをバックアップすることをお勧めします。

• ソースファイルの LastModifyTime 属性は、ファイルが宛先バケットに移行された後も保持されます。宛先バケットにライフサイクルルールが構成されており、それが有効な場合、最終更新時刻がライフサイクルルールの指定期間内にある移行済みファイルは、特定のストレージタイプで削除またはアーカイブされる可能性があります。

移行の制限

• データオンライン移行では、1 つのタスクで 1 つのバケットのデータのみを移行できます。1 つのタスクでアカウントに属するすべてのデータを移行することはできません。

• Huawei Cloud OBS から移行されたデータのプロパティは次のとおりです:

  • サポートされているプロパティ: x-obs-meta-*, LastModifyTime, Content-Type, Cache-Control, Content-Encoding, Content-Language, および Expires。

  • サポートされていないプロパティには、StorageClass, Content-Disposition, ACL, サーバ側暗号化, およびタギングが含まれますが、これらに限定されません。

    説明

    このサポートされていないプロパティのリストはすべてを網羅しているわけではありません。リストにない他のプロパティの動作は未確定です。実際の移行結果が優先されます。

  • 警告

    ソースデータアドレスが標準の Huawei OBS ドメイン名を使用している場合、GetObject を呼び出すと、Content-Disposition が強制的に attachment に設定されます。このプロパティは宛先に移行されるため、ソースとの不一致が生じます。ブラウザが HTML や PNG ファイルなどのこのようなファイルにアクセスすると、強制的にダウンロードがトリガーされます。

ステップ 1: リージョンを選択する

1. 作成した RAM ユーザーとして データオンライン移行コンソール にログインします。

2. トップナビゲーションバーの左上隅で、ソースデータアドレスが存在するリージョンを選択するか、ソースデータアドレスが存在するリージョンに最も近いリージョンを選択します。

   選択したリージョンは、データオンライン移行がデプロイされるリージョンです。中国国内でサポートされているリージョンには、中国 (北京)、中国 (上海)、中国 (杭州)、中国 (深圳)、中国 (ウランチャブ)、および中国 (香港) があり、中国国外でサポートされているリージョンには、シンガポール、ドイツ (フランクフルト)、および米国 (バージニア) があります。

   重要

   • あるリージョンで作成したデータアドレスと移行タスクは、別のリージョンでは使用できません。リージョンは慎重に選択してください。

   • ソースデータアドレスが存在するリージョンを選択することをお勧めします。ソースデータアドレスが存在するリージョンがデータオンライン移行でサポートされていない場合は、ソースデータアドレスが存在するリージョンに最も近いリージョンを選択してください。

   • クロスボーダーデータ移行を高速化するには、転送アクセラレーションを有効にすることをお勧めします。OSS バケットで転送アクセラレーションを有効にすると、転送アクセラレーション料金が課金されます。詳細については、「転送アクセラレーションを使用して OSS にアクセスする」をご参照ください。

ステップ 2: ソースデータアドレスを作成する

1. 左側のナビゲーションウィンドウで、[データオンライン移行] > [アドレス管理] を選択します。[アドレス管理] ページで、[アドレスの作成] をクリックします。

2. [データアドレスの作成] ページで、次のパラメーターを構成し、[OK] をクリックします。

   パラメーター	必須	説明
   名前	はい	ソースデータアドレスの名前。名前は次の要件を満たす必要があります: 名前の長さは 3 ～ 63 文字です。 名前は大文字と小文字を区別し、小文字、数字、ハイフン (-)、およびアンダースコア (_) を含めることができます。 名前は UTF-8 形式でエンコードされ、ハイフン (-) またはアンダースコア (_) で始めることはできません。
   タイプ	はい	標準のオブジェクトストレージには [Huawei OBS] を選択します。 並列ファイルシステムには [Huawei OBSFS] を選択します。
   ドメイン名	はい	Huawei Cloud OBS のエンドポイントを入力します。エンドポイントのフォーマットは obs.region-of-the-bucket.myhuaweicloud.com です。たとえば、バケットが CN-North-1 リージョンにある場合、エンドポイントは obs.cn-north-1.myhuaweicloud.com です。Huawei Cloud OBS でサポートされているリージョンの詳細については、「Huawei Cloud OBS」をご参照ください。
   AccessKeyId	はい	作成した IAM ユーザーの AccessKey ペアを入力します。これは、Huawei OBS が ID 検証に使用し、ユーザーがソースデータを読み取る権限を持っているかどうかを確認するために使用されます。
   SecretAccessKey	はい
   バケット	はい	移行するデータを含む Huawei Cloud OBS オブジェクトストレージまたは並列ファイルシステムバケットの名前を入力します。 説明 バケット名は、スペース、改行、タブ文字、またはその他の無効な文字で開始または終了することはできません。
   プレフィックス	いいえ	プレフィックスを指定して、データの一部のみを移行できます。 プレフィックスを指定する: 指定されたディレクトリ (プレフィックス) 内のデータを移行します。プレフィックスはスラッシュ (/) で始めることはできず、スラッシュ (/) で終わる必要があります。 プレフィックスを指定しない: バケット内のすべてのデータを移行します。
   チャネル	いいえ	使用するトンネルの名前。 重要 このパラメーターは、Express Connect 回線または VPN ゲートウェイを使用してクラウドにデータを移行する場合、または自己管理データベースからクラウドにデータを移行する場合にのみ必要です。 宛先データアドレスのデータがローカルファイルシステムに保存されている場合、または Alibaba Finance Cloud や Apsara Stack などの環境で Express Connect 回線を介してデータを移行する必要がある場合は、エージェントを作成してデプロイする必要があります。
   プロキシ	いいえ	使用するエージェントの名前。 重要 このパラメーターは、Express Connect 回線または VPN ゲートウェイを使用してクラウドにデータを移行する場合、または自己管理データベースからクラウドにデータを移行する場合にのみ必要です。 特定のトンネルに対して一度に最大 200 のエージェントを選択できます。

ステップ 3: 宛先データアドレスを作成する

1. 左側のナビゲーションウィンドウで、[データオンライン移行] > [アドレス管理] を選択します。[アドレス管理] ページで、[アドレスの作成] をクリックします。

2. [アドレスの作成] パネルで、次のパラメーターを構成し、[OK] をクリックします。

パラメーター	必須	説明
名前	はい	宛先データアドレスの名前を入力します。名前は次の要件を満たす必要があります: 名前の長さは 3 ～ 63 文字です。 名前は大文字と小文字を区別し、小文字、数字、ハイフン (-)、およびアンダースコア (_) を含めることができます。 名前は UTF-8 形式でエンコードされ、ハイフン (-) またはアンダースコア (_) で始めることはできません。
タイプ	はい	[Alibaba OSS] を選択します。
カスタムドメイン名	いいえ	ユーザー定義のカスタムドメイン名をサポートします。
リージョン	はい	宛先データアドレスが配置されているリージョンを選択します。たとえば、[中国 (杭州)] です。
権限付与ロール	はい	宛先バケットがデータオンライン移行コンソールアカウントに属している場合 移行コンソール権限付与ロール (推奨)。 移行コンソールからの手動権限付与 (代替)。 宛先バケットがデータオンライン移行コンソールアカウントに属していない場合 OSS コンソール権限付与ロール。
バケット	はい	現在のコンソールアカウント下の宛先バケットの名前を入力します。
プレフィックス	いいえ	プレフィックスを指定して、ソースデータを特定のディレクトリに移行できます。プレフィックスはスラッシュ (/) で始めることはできず、スラッシュ (/) で終わる必要があります。例: data/to/oss/。 プレフィックスを指定する: たとえば、ソースプレフィックスが example/src/ で、ファイル example.jpg が含まれており、宛先プレフィックスを example/dest/ に設定した場合、移行されたファイルの完全なパスは example/dest/example.jpg になります。 プレフィックスを指定しない: ソースデータは宛先バケットのルートディレクトリに移行されます。
チャネル	いいえ	使用するトンネルの名前。 重要 このパラメーターは、Express Connect 回線または VPN ゲートウェイを使用してクラウドにデータを移行する場合、または自己管理データベースからクラウドにデータを移行する場合にのみ必要です。 宛先データアドレスのデータがローカルファイルシステムに保存されている場合、または Alibaba Finance Cloud や Apsara Stack などの環境で Express Connect 回線を介してデータを移行する必要がある場合は、エージェントを作成してデプロイする必要があります。
プロキシ	いいえ	使用するエージェントの名前。 重要 このパラメーターは、Express Connect 回線または VPN ゲートウェイを使用してクラウドにデータを移行する場合、または自己管理データベースからクラウドにデータを移行する場合にのみ必要です。 特定のトンネルに対して一度に最大 200 のエージェントを選択できます。

ステップ 4: 移行タスクを作成する

1. 左側のナビゲーションウィンドウで、[データオンライン移行] > [移行タスク] を選択します。[移行タスク] ページで、[タスクの作成] をクリックします。

2. [アドレスの選択] ステップで、パラメーターを構成します。次の表にパラメーターを示します。

   パラメーター	必須	説明
   名前	はい	移行タスクの名前。名前は次の要件を満たす必要があります: 名前の長さは 3 ～ 63 文字です。 名前は大文字と小文字を区別し、小文字、数字、ハイフン (-)、およびアンダースコア (_) を含めることができます。 名前は UTF-8 形式でエンコードされ、ハイフン (-) またはアンダースコア (_) で始めることはできません。
   ソースアドレス	はい	作成したソースデータアドレス。
   宛先アドレス	はい	作成した宛先データアドレス。

3. [タスク構成] ステップで、パラメーターを構成します。次の表にパラメーターを示します。

   パラメーター	必須	説明
   移行帯域幅	いいえ	移行タスクで利用可能な最大帯域幅。有効な値: [デフォルト]: 移行帯域幅のデフォルトの上限を使用します。実際の移行帯域幅は、ファイルサイズとファイル数によって異なります。 [上限を指定]: プロンプトに従って、移行帯域幅のカスタム上限を指定します。 重要 実際の移行速度は、ソースデータアドレス、ネットワーク、宛先データアドレスでのスロットリング、ファイルサイズなど、複数の要因によって異なります。したがって、実際の移行速度は指定された上限に達しない場合があります。 ソースデータアドレス、移行目的、ビジネス状況、およびネットワーク帯域幅の評価に基づいて、移行帯域幅の上限に適切な値を指定してください。不適切なスロットリングは、ビジネスパフォーマンスに影響を与える可能性があります。
   1 秒あたりの移行ファイル数	いいえ	1 秒あたりに移行できるファイルの最大数。有効な値: [デフォルト]: 1 秒あたりに移行できるファイルのデフォルトの上限を使用します。 [上限を指定]: プロンプトに従って、1 秒あたりに移行できるファイルのカスタム上限を指定します。 重要 実際の移行速度は、ソースデータアドレス、ネットワーク、宛先データアドレスでのスロットリング、ファイルサイズなど、複数の要因によって異なります。したがって、実際の移行速度は指定された上限に達しない場合があります。 ソースデータアドレス、移行目的、ビジネス状況、およびネットワーク帯域幅の評価に基づいて、移行帯域幅の上限に適切な値を指定してください。不適切なスロットリングは、ビジネスパフォーマンスに影響を与える可能性があります。
   上書き方法	はい	ソースデータアドレスのファイルと同じ名前のファイルが宛先データアドレスにある場合に、そのファイルを上書きするかどうかを指定します。有効な値: [上書きしない]: ソースデータアドレスのファイルを移行しません。 [すべて上書き]: 宛先データアドレスのファイルを上書きします。 [最終変更時刻に基づいて上書き]: ソースデータアドレスのファイルの最終変更時刻が宛先データアドレスのファイルの最終変更時刻より新しい場合、宛先データアドレスのファイルは上書きされます。 ソースデータアドレスのファイルの最終変更時刻が宛先データアドレスのファイルの最終変更時刻と同じ場合、サイズと Content-Type ヘッダーのいずれかが異なる場合、宛先データアドレスのファイルは上書きされます。 警告 [最終変更時刻に基づいて上書き] を選択した場合、新しいファイルが古いファイルによって上書きされないという保証はなく、最近の更新が失われるリスクがあります。 [最終変更時刻に基づいて上書き] を選択する場合は、ソースデータアドレスのファイルに 最終変更時刻、サイズ、Content-Type ヘッダーなどの情報が含まれていることを確認してください。そうでない場合、上書きポリシーが無効になり、予期しない移行結果が発生する可能性があります。 [上書きしない] または [最終変更時刻に基づいて上書き] を選択した場合、システムはソースと宛先のデータアドレスにリクエストを送信してメタ情報を取得し、ファイルを上書きするかどうかを決定します。したがって、ソースと宛先のデータアドレスに対してリクエスト料金が発生します。
   移行レポート	はい	移行レポートをプッシュするかどうかを指定します。有効な値: [プッシュしない] (デフォルト): 移行レポートを宛先バケットにプッシュしません。 [プッシュ]: 移行レポートを宛先バケットにプッシュします。詳細については、「次のステップ」をご参照ください。 重要 移行レポートは、宛先データアドレスのストレージスペースを占有します。 移行レポートは遅れてプッシュされる場合があります。移行レポートが生成されるまでお待ちください。 タスクの各実行に対して一意の ID が生成されます。移行レポートは一度だけプッシュされます。必要がない限り、移行レポートを削除しないことをお勧めします。
   移行ログ	はい	移行ログを Simple Log Service (SLS) にプッシュするかどうかを指定します。有効な値: [プッシュしない] (デフォルト): 移行ログをプッシュしません。 [プッシュ]: 移行ログを SLS にプッシュします。SLS コンソールで移行ログを表示します。 [ファイルエラーログのみプッシュ]: エラー移行ログのみを SLS にプッシュします。SLS コンソールでエラー移行ログを表示します。 [プッシュ] または [ファイルエラーログのみプッシュ] を選択すると、データオンライン移行は SLS にプロジェクトを作成します。プロジェクトの名前は aliyun-oss-import-log-Alibaba Cloud アカウント ID-データオンライン移行コンソールのリージョン の形式になります。例: aliyun-oss-import-log-137918634953****-cn-hangzhou。 重要 移行タスクのエラーを防ぐために、[プッシュ] または [ファイルエラーログのみプッシュ] を選択する前に、次の要件が満たされていることを確認してください: SLS がアクティブ化されている。 [権限付与] ページで権限付与を確認した。
   権限付与	いいえ	このパラメーターは、[移行ログ] パラメーターを [プッシュ] または [ファイルエラーログのみプッシュ] に設定した場合に表示されます。 [権限付与] をクリックして [クラウドリソースアクセス権限付与] ページに移動します。このページで、[権限付与ポリシーの確認] をクリックします。RAM ロール [AliyunOSSImportSlsAuditRole] が作成され、RAM ロールに権限が付与されます。
   ファイル名	いいえ	ファイル名に基づくフィルター。 [包含] と [除外] の両方のルールがサポートされています。ただし、特定の正規表現の構文のみがサポートされています。正規表現の構文の詳細については、re2 をご参照ください。例: .*\.jpg$ は、名前が .jpg で終わるすべてのファイルを示します。 デフォルトでは、^file.* は、ルートディレクトリ内で名前が file で始まるすべてのファイルを示します。 ソースデータアドレスにプレフィックスが構成されており、プレフィックスが data/to/oss/ の場合、指定されたディレクトリ内で名前が file で始まるすべてのファイルを照合するには、^data/to/oss/file.* フィルターを使用する必要があります。 .*/picture/.* は、パスに picture という名前のサブディレクトリが含まれるファイルを示します。 重要 包含ルールが構成されている場合、包含ルールに一致するすべてのファイルが移行されます。複数の包含ルールが構成されている場合、いずれかの包含ルールに一致すればファイルは移行されます。 たとえば、picture.jpg と picture.png ファイルが存在し、包含ルール .*\.jpg$ が構成されている場合、picture.jpg ファイルのみが移行されます。同時に包含ルール .*\.png$ が構成されている場合、両方のファイルが移行されます。 除外ルールが構成されている場合、除外ルールに一致するすべてのファイルは移行されません。複数の除外ルールが構成されている場合、いずれかの除外ルールに一致すればファイルは移行されません。 たとえば、picture.jpg と picture.png ファイルが存在し、除外ルール .*\.jpg$ が構成されている場合、picture.png ファイルのみが移行されます。同時に除外ルール .*\.png$ が構成されている場合、どちらのファイルも移行されません。 除外ルールは包含ルールよりも優先されます。ファイルが除外ルールと包含ルールの両方に一致する場合、そのファイルは移行されません。 たとえば、file.txt ファイルが存在し、除外ルール .*\.txt$ と包含ルール file.* が構成されている場合、このファイルは移行されません。
   ファイル変更時刻	いいえ	ファイルの最終変更時刻に基づくフィルター。 最終変更時刻をフィルター ルールとして指定できます。期間を指定した場合、最終変更時刻が指定された期間内にあるファイルのみが移行されます。例: 開始時刻として 2019 年 1 月 1 日を指定し、終了時刻を指定しない場合、最終変更時刻が 2019 年 1 月 1 日以降のファイルのみが移行されます。 終了時刻として 2022 年 1 月 1 日を指定し、開始時刻を指定しない場合、最終変更時刻が 2022 年 1 月 1 日以前のファイルのみが移行されます。 開始時刻として 2019 年 1 月 1 日、終了時刻として 2022 年 1 月 1 日を指定した場合、最終変更時刻が 2019 年 1 月 1 日以降で 2022 年 1 月 1 日以前のファイルのみが移行されます。
   実行時間	いいえ	重要 移行タスクの現在の実行が次のスケジュールされた開始時刻までに完了しない場合、タスクは現在の移行が完了した後の次のスケジュールされた開始時刻に次の実行を開始します。このプロセスは、タスクが指定された回数実行されるまで続きます。 データオンライン移行が中国 (香港) リージョンまたは中国本土のリージョンにデプロイされている場合、最大 10 の同時移行タスクがサポートされます。データオンライン移行が中国国外のリージョンにデプロイされている場合、最大 5 つの同時移行タスクがサポートされます。同時タスクの数が制限を超えると、タスクの実行がスケジュールどおりに完了しない場合があります。 移行タスクが実行される時間。有効な値: [即時]: タスクはすぐに実行されます。 [スケジュールされたタスク]: タスクは毎日指定された期間内に実行されます。デフォルトでは、タスクは指定された開始時刻に開始され、指定された停止時刻に停止します。 [定期的なスケジューリング]: タスクは、指定した実行頻度と実行回数に基づいて実行されます。 実行頻度: タスクの実行頻度を指定します。有効な値: 毎時、毎日、毎週、特定の曜日、およびカスタム。詳細については、このトピックの「サポートされている実行頻度」セクションをご参照ください。 実行回数: プロンプトに従って、タスクの最大実行回数を指定します。デフォルトでは、このパラメーターを指定しない場合、タスクは一度実行されます。 重要 タスクはいつでも手動で開始および停止できます。これは、タスクのカスタム実行時間の影響を受けません。

4. データオンライン移行契約 を読み、[Alibaba Cloud 国際ウェブサイト製品サービス規約を読み、同意します。] と [移行タスクが完了すると、移行されたデータがソースデータと異なる場合があることを理解しました。したがって、移行されたデータとソースデータの一貫性を確認する義務と責任があります。Alibaba Cloud は、移行されたデータとソースデータの一貫性の確認について責任を負いません。] を選択します。次に、[次へ] をクリックします。

5. 構成が正しいことを確認し、[OK] をクリックします。移行タスクが作成されます。

サポートされている実行頻度

ステップ 5: データの検証