Data Transmission Service (DTS) は、自己管理 MySQL や RDS for MySQL などの MySQL データベースから Tair (Redis OSS-compatible) へのデータ同期をサポートしています。これにより、バックエンドのリレーショナルデータベースの負荷を軽減し、ユーザーエクスペリエンスを向上させることができます。このトピックでは、RDS for MySQL インスタンスから Tair (Redis OSS-compatible) インスタンスにデータを同期する方法について説明します。
前提条件
同期するソースデータベースのテーブルには、プライマリキーが必要です。
ソースの RDS for MySQL インスタンスが使用するストレージ容量よりも大きいストレージ容量を持つ宛先の Tair (Redis OSS-compatible) インスタンスを作成します。詳細については、「手順 1:インスタンスの作成」をご参照ください。
説明サポートされているソースデータベースとターゲットデータベースのバージョンについては、「同期ソリューション」をご参照ください。
注意事項
タイプ | 説明 |
ソースデータベースの制限 |
|
その他の制限 |
|
特殊なケース |
|
課金
| 同期タイプ | タスク設定料金 |
| スキーマ同期と完全データ同期 | 無料。 |
| 増分データ同期 | 有料です。詳細については、「課金の概要」をご参照ください。 |
増分同期の SQL 文
操作タイプ | SQL 文 |
DML | INSERT、UPDATE、DELETE |
データベースアカウントの権限
データベース | 必要な権限 | 作成と権限付与の方法 |
ソース RDS for MySQL | 同期するオブジェクトに対する読み取り権限。 | 「ApsaraDB RDS for MySQL インスタンスのデータベースアカウントを作成する」および「ApsaraDB RDS for MySQL インスタンスのデータベースアカウントの権限を変更する」をご参照ください。 |
宛先 Tair (Redis OSS-compatible) | インスタンスに対する読み取りおよび書き込み権限。 | 「データベースアカウントの作成と管理」をご参照ください。 |
操作手順
ターゲットリージョンのデータ同期タスクリストページに移動します。次のいずれかの方法を使用できます。
DTS コンソールから
[DTS コンソール]にログインします。
左側のナビゲーションウィンドウで、データ同期 をクリックします。
ページの左上隅で、同期インスタンスが配置されているリージョンを選択します。
DMS コンソールから
説明実際の操作は、DMS コンソールのモードとレイアウトによって異なる場合があります。詳細については、「シンプルモードコンソール」および「DMS コンソールのレイアウトとスタイルをカスタマイズする」をご参照ください。
DMS コンソールにログインします。
トップメニューバーから、 を選択します。
データ同期タスク の右側で、同期インスタンスのリージョンを選択します。
タスクの作成 をクリックします。タスク設定ページが開きます。
ソースデータベースとターゲットデータベースを設定します。
カテゴリ
設定
説明
なし
タスク名
DTS は自動的にタスク名を生成します。簡単に識別できるように、わかりやすい名前を指定することを推奨します。名前は一意である必要はありません。
移行元データベース
既存の接続情報の選択
システムに登録されているデータベースインスタンス (新規作成または保存済み) を使用するには、ドロップダウンリストから目的のデータベースインスタンスを選択します。以下のデータベース情報は自動的に設定されます。
説明DMS コンソールでは、この設定項目は DMS データベースインスタンスの選択 です。
データベースインスタンスをシステムに登録していない場合、または登録済みのインスタンスを使用する必要がない場合は、以下のデータベース情報を手動で設定します。
データベースタイプ
MySQL を選択します。
アクセス方法
Alibaba Cloud インスタンス を選択します。
インスタンスのリージョン
ソース RDS for MySQL インスタンスのリージョンを選択します。
Alibaba Cloud アカウント間でデータを複製
この例では、現在の Alibaba Cloud アカウント下のデータベースインスタンスを使用します。× を選択します。
RDS インスタンス ID
ソース RDS for MySQL インスタンスの ID を選択します。
データベースアカウント
ソース RDS for MySQL インスタンスのデータベースアカウントを入力します。権限要件については、「データベースアカウントの権限」をご参照ください。
データベースのパスワード
データベースアカウントに対応するパスワードを入力します。
暗号化
必要に応じて [非暗号化接続] または [SSL セキュア接続] を選択します。これを [SSL セキュア接続] に設定する場合は、事前に RDS for MySQL インスタンスの SSL 暗号化を有効にする必要があります。詳細については、「クラウド証明書を使用して SSL リンク暗号化を迅速に有効にする」をご参照ください。
移行先データベース
既存の接続情報の選択
システムに登録されているデータベースインスタンス (新規作成または保存済み) を使用するには、ドロップダウンリストから目的のデータベースインスタンスを選択します。以下のデータベース情報は自動的に設定されます。
説明DMS コンソールでは、この設定項目は DMS データベースインスタンスの選択 です。
データベースインスタンスをシステムに登録していない場合、または登録済みのインスタンスを使用する必要がない場合は、以下のデータベース情報を手動で設定します。
データベースタイプ
Tair/Redis を選択します。
アクセス方法
Alibaba Cloud インスタンス を選択します。
インスタンスのリージョン
宛先 Tair (Redis OSS-compatible) インスタンスのリージョンを選択します。
Alibaba Cloud アカウント間でデータを複製
この例では、現在の Alibaba Cloud アカウント下のデータベースインスタンスを使用します。× を選択します。
インスタンス ID
宛先 Tair (Redis OSS-compatible) インスタンスの ID を選択します。
認証方法
必要に応じて認証方式を選択します。この例では、パスワードログイン が選択されています。
説明アカウント + パスワードログイン は Redis 6.0 以降でのみ選択できます。
シークレットフリーのログイン を選択した場合は、Redis データベースでパスワードなしのアクセスが有効になっていることを確認してください。Tair (Redis 互換) インスタンスでパスワードなしのアクセスを有効にする方法の詳細については、「VPC 経由でのパスワードなしのアクセスを有効にする」をご参照ください。
データベースのパスワード
宛先 Tair (Redis OSS-compatible) インスタンスに接続するためのパスワードを入力します。
説明パスワードのフォーマットは <user>:<password> です。たとえば、Redis インスタンスのカスタムユーザー名が `admin` で、パスワードが `Rp829dlwa` の場合、`admin:Rp829dlwa` と入力します。
設定が完了したら、ページ下部の 接続をテストして続行 をクリックします。
説明DTS サーバーからのアクセスを許可するために、DTS サービスの IP アドレスブロックが、自動または手動でソースデータベースとターゲットデータベースのセキュリティ設定に追加されていることを確認してください。詳細については、「DTS サーバーの IP アドレスホワイトリストを追加する」をご参照ください。
ソースまたはターゲットデータベースが自己管理データベースの場合 (アクセス方法 が Alibaba Cloud インスタンス ではない場合)、DTS サーバーの CIDR ブロック ダイアログボックスで 接続テスト をクリックする必要もあります。
タスクオブジェクトを設定します。
オブジェクト設定 ページで、同期するオブジェクトを設定できます。
設定
説明
同期タイプ
増分データ同期 はデフォルトで選択されています。既存データを同期するには、完全データ同期 も選択します。
競合するテーブルの処理モード
エラーの事前チェックと報告:宛先が空であるかどうかをチェックします。宛先が空の場合、事前チェックは成功します。宛先が空でない場合、事前チェック中にエラーが報告され、データ同期タスクは開始されません。
エラーを無視して続行:ターゲットデータベース内のオブジェクトデータの存在検査 の事前チェックをスキップします。
警告エラーを無視して続行 を選択すると、ソースと宛先の両方に同じキーが存在する場合、ソースデータが宛先データを上書きします。これにより、宛先でデータが失われる可能性があります。このオプションは慎重に選択してください。
ソースオブジェクト
ソースオブジェクト ボックスでオブジェクトをクリックし、
をクリックして 選択中のオブジェクト ボックスに移動します。説明データベース、テーブル、列のレベルでオブジェクトを選択できます。
選択中のオブジェクト
宛先の Redis DB を指定するには、選択中のオブジェクト ボックスで同期するスキーマを右クリックします。マッピング機能を使用して次のパラメーターを設定し、[OK] をクリックします。
Redis DB マッピング名 (0 ~ 255):データを受信する Redis の DB です。数字のみを入力してください。
キャッシュデータマッピングモード:データが Redis に同期された後のデータの形式です。オプションの横にある
アイコンにカーソルを合わせると情報が表示されます。キャッシュデータマッピングモード が データベース - テーブル - プライマリキーの KV モデル に設定されている場合は、Value データの分割方法 も設定する必要があります。
説明マッピング機能は、スキーマ名とテーブル名ではサポートされていません。
データベースまたはテーブルレベルで同期する SQL 操作を選択するには、選択中のオブジェクト ボックスでオブジェクトを右クリックし、表示されるダイアログボックスで目的の SQL 操作を選択します。
WHERE 句を設定してデータをフィルタリングするには、選択中のオブジェクト ボックスでテーブルを右クリックし、表示されるダイアログボックスでフィルター条件を設定します。手順については、「データのフィルタリング」をご参照ください。
詳細設定へ をクリックします。
設定
説明
タスクのスケジュールに使用する専用クラスターの選択
デフォルトでは、DTS は共有クラスターでタスクをスケジュールするため、選択する必要はありません。タスクの安定性を高めるために、DTS 同期タスクを実行するための専用クラスターを購入できます。詳細については、「DTS 専用クラスターとは何ですか?」をご参照ください。
失敗した接続の再試行時間
同期タスクの開始後にソースまたはターゲットデータベースへの接続が失敗した場合、DTS はエラーを報告し、すぐに接続のリトライを開始します。デフォルトのリトライ時間は 720 分です。リトライ時間は 10 分から 1,440 分の範囲でカスタマイズできます。30 分以上の設定を推奨します。指定されたリトライ時間内に DTS が再接続すると、タスクは自動的に再開されます。そうでない場合、タスクは失敗します。
説明DTS インスタンス A と DTS インスタンス B のように、同じソースまたは宛先を持つ複数の DTS インスタンスの場合、ネットワークリトライ時間が A で 30 分、B で 60 分に設定されている場合、短い方の 30 分が適用されます。
DTS は接続リトライ中のタスク実行時間に対して課金するため、ビジネスニーズに基づいてリトライ時間をカスタマイズするか、ソースおよびターゲットデータベースインスタンスがリリースされた後、できるだけ早く DTS インスタンスをリリースすることを推奨します。
移行元データベースと移行先データベースで他の問題が発生した場合の、再試行までの待機時間です。
同期タスクの開始後、DDL または DML の実行エラーなど、ソースまたはターゲットデータベースで接続以外の問題が発生した場合、DTS はエラーを報告し、すぐに継続的なリトライ操作を開始します。デフォルトのリトライ時間は 10 分です。リトライ時間は 1 分から 1,440 分の範囲でカスタマイズすることもできます。10 分以上の設定を推奨します。設定されたリトライ時間内に関連操作が成功すると、同期タスクは自動的に再開されます。そうでない場合、タスクは失敗します。
重要移行元データベースと移行先データベースで他の問題が発生した場合の、再試行までの待機時間です。 の値は、失敗した接続の再試行時間 の値より小さくする必要があります。
完全同期レートを制限するかどうか
完全データ同期フェーズ中、DTS はソースデータベースとターゲットデータベースの読み取りおよび書き込みリソースを消費し、負荷を増加させる可能性があります。1 秒あたりのソースデータベースのクエリ率 QPS、1 秒あたりの完全移行の行数 RPS、および 1 秒あたりの完全移行データ量 (MB) BPS を設定することで、完全データ同期タスクのレート制限を設定し、ターゲットデータベースへの圧力を軽減できます。
説明この設定項目は、同期タイプ が 完全データ同期 に設定されている場合にのみ利用できます。
同期インスタンスの実行後に、完全データ同期のレートを調整することもできます。
増分同期率を制限するかどうか
1 秒あたりの増分同期の行数 RPS と 1 秒あたりの増分同期データ量 (MB) BPS を設定することで、増分同期タスクのレート制限を設定し、ターゲットデータベースへの圧力を軽減することもできます。
キャッシュ有効期限
要件に基づいて、データが Redis に同期された後のキーの生存時間 (TTL) を設定します。
重要値 -1 は、キーが決して期限切れにならないことを意味します。これにより、Redis のメモリが不足し、タスクが失敗する可能性があります。
順方向および逆方向タスクのハートビートテーブル SQL を削除
ビジネスニーズに基づいて、DTS インスタンスの実行中にハートビート SQL 情報をソースデータベースに書き込むかどうかを選択します。
[はい]:ハートビート SQL 情報はソースデータベースに書き込まれません。これにより、DTS インスタンスが遅延を報告する可能性があります。
[いいえ]:ハートビート SQL 情報をソースデータベースに書き込みます。これにより、ソースデータベースの物理バックアップやクローン作成などの機能に干渉する可能性があります。
環境タグ
要件に基づいてインスタンスを識別するための環境タグを選択できます。この例では、タグを選択する必要はありません。
ETL 機能の設定
抽出、変換、ロード (ETL) 機能を有効にするかどうかを指定します。詳細については、「ETL とは何か?」をご参照ください。有効な値:
[はい]:ETL 機能を設定します。コードエディタにデータ処理文を入力できます。詳細については、「データ移行またはデータ同期タスクで ETL を設定する」をご参照ください。
[いいえ]:ETL 機能を設定しません。
監視アラート
アラートを設定するかどうかを指定します。同期が失敗した場合、またはレイテンシが指定されたしきい値を超えた場合に、アラート連絡先に通知が送信されます。
[設定しない]:アラートは設定されません。
設定: アラートを構成します。アラートのしきい値とアラート通知も設定する必要があります。詳細については、「タスク構成時にモニタリングとアラートを設定する」をご参照ください。
タスクを保存し、事前チェックを実行します。
API 操作でこのインスタンスを設定するためのパラメーターを表示するには、次:タスク設定の保存と事前チェック ボタンにマウスを移動し、ツールチップの OpenAPI パラメーターのプレビュー をクリックします。
API パラメーターの表示が完了したら、ページ下部の 次:タスク設定の保存と事前チェック をクリックします。
説明同期タスクが開始される前に、事前チェックが実行されます。タスクは事前チェックに合格した後にのみ開始できます。
事前チェックが失敗した場合は、失敗した項目の横にある 詳細を表示 をクリックし、プロンプトに従って問題を解決してから、事前チェックを再実行します。
事前チェック中に警告が生成された場合:
チェック項目が失敗し、無視できない場合は、項目の横にある 詳細を表示 をクリックします。次に、指示に従って問題を修正し、事前チェックを再度実行します。
無視できるチェック項目については、アラートの詳細を確認、無視、OK、再度事前チェックを実行 の順にクリックして、警告をスキップし、事前チェックを再度実行します。チェック項目の警告を無視すると、データ不整合などの問題が発生し、ビジネスにリスクをもたらす可能性があります。
インスタンスを購入します。
成功率 が 100% になったら、次:インスタンスの購入 をクリックします。
購入 ページで、データ同期インスタンスの課金方法とリンク仕様を選択します。詳細については、次の表をご参照ください。
カテゴリ
パラメーター
説明
新しいインスタンスクラス
課金方法
サブスクリプション:インスタンス作成時にお支払いいただきます。長期的なニーズに適しており、従量課金よりも手頃で、サブスクリプション期間が長いほど割引率が高くなります。
従量課金:時間単位で課金されます。短期的なニーズに適しています。使用後すぐにインスタンスをリリースしてコストを節約できます。
リソースグループの設定
インスタンスが属するリソースグループ。デフォルトは [デフォルトリソースグループ] です。詳細については、「Resource Management とは」をご参照ください。
リンク仕様
DTS は、さまざまなパフォーマンスレベルの同期仕様を提供します。リンク仕様は同期レートに影響します。ビジネスシナリオに基づいて選択できます。詳細については、「データ同期リンク仕様」をご参照ください。
サブスクリプション期間
サブスクリプションモードでは、サブスクリプションインスタンスの期間と数量を選択します。月次サブスクリプションでは 1~9 か月、年次サブスクリプションでは 1、2、3、または 5 年から選択できます。
説明このオプションは、課金方法が サブスクリプション の場合にのみ表示されます。
設定が完了したら、Data Transmission Service (従量課金) 利用規約 を読み、選択します。
購入して起動 をクリックし、OK ダイアログボックスで [OK] をクリックします。
データ同期ページでタスクの進捗状況を確認できます。