リアルタイム移行のための DTS による RDS MySQL から Doris への同期 - Data Transmission Service

Data Transmission Service (DTS) は、自己管理 MySQL データベースや RDS MySQL インスタンスなどの MySQL データベースから、大規模なデータ分析のために Doris データベースへデータを移行することをサポートしています。このトピックでは、ソースデータベースとして RDS MySQL インスタンスを、ターゲットデータベースとして Elastic Compute Service (ECS) インスタンスにデプロイされた Doris データベースを使用して、その手順を説明します。

事前準備

ターゲットの Doris データベースを作成します。ターゲットデータベースのストレージ容量が、ソースの RDS MySQL インスタンスが使用するストレージ容量よりも大きいことを確認してください。

説明

ソースデータベースとターゲットデータベースでサポートされているバージョンについては、「移行ソリューションの概要」をご参照ください。

注意事項

タイプ	注意
ソースデータベースの制限	帯域幅の要件：ソースデータベースをホストするサーバーには、十分なアウトバウンド帯域幅が必要です。そうでない場合、移行速度に影響が出ます。増分移行を実行する場合、バイナリログについて次の点にご注意ください：バイナリロギングを有効にする必要があります。`binlog_format` パラメーターは `row` に、`binlog_row_image` パラメーターは `full` に設定する必要があります。そうでない場合、事前チェックが失敗し、データ移行タスクを開始できません。重要ソースの自己管理 MySQL データベースが、各インスタンスがプライマリであり、もう一方のセカンダリでもあるデュアルプライマリクラスターにある場合、`log_slave_updates` パラメーターを有効にする必要があります。これにより、DTS がすべてのバイナリログを取得できるようになります。 RDS for MySQL インスタンスのバイナリログは、少なくとも 3 日間保持する必要があります。7 日間保持することを推奨します。自己管理 MySQL データベースのバイナリログは、少なくとも 7 日間保持する必要があります。そうでない場合、DTS がバイナリログを取得できずに失敗する可能性があります。極端なケースでは、これによりデータの不整合やデータ損失が発生する可能性があります。必要な期間よりも短いバイナリログの保持期間に起因する問題は、DTS サービスレベル契約 (SLA) の対象外です。説明 RDS for MySQL インスタンスのバイナリログの [保持期間] の設定方法については、「バイナリログの自動削除」をご参照ください。移行オブジェクトの要件：移行するテーブルにプライマリキーまたは一意制約がある場合：テーブルのフィールドが一意であることを確認してください。そうでない場合、ターゲットデータベースに重複データが存在する可能性があります。移行オブジェクトにプライマリキーも一意制約もないテーブルが含まれる場合：インスタンスを設定する際、移行タイプでスキーマ移行を選択し、テーブル・列設定ステージで、テーブルのエンジンの選択を [duplicate] に設定することを推奨します。そうでない場合、インスタンスが失敗したり、データ損失が発生したりする可能性があります。説明スキーマ移行中、DTS はターゲットテーブルにフィールドを追加します。詳細については、「追加の列情報」をご参照ください。テーブルレベルでデータを移行し、列名のマッピングなどのテーブル編集が必要な場合、1 つのデータ移行タスクでサポートされるテーブルは最大 1,000 です。この制限を超えると、タスクを送信した後にエラーが報告されます。この場合、テーブルを複数の移行タスクに分割するか、データベース全体を移行するようにタスクを設定してください。ソースデータベースの操作制限：スキーマ移行および完全なデータ移行中は、データベースやテーブルのスキーマを変更する DDL 操作を実行しないでください。そうでない場合、データ移行タスクは失敗します。説明完全なデータ移行中、DTS はソースデータベースをクエリします。これによりメタデータロックが作成され、ソースデータベースでの DDL 操作がブロックされる可能性があります。完全なデータ移行のみを実行する場合、ソースインスタンスに新しいデータを書き込まないでください。そうでない場合、ソースとターゲット間でデータの不整合が発生します。リアルタイムのデータ整合性を確保するには、スキーマ移行、完全なデータ移行、および増分データ移行を選択してください。移行中にバイナリログに記録されない操作によるデータ変更は、ターゲットデータベースに移行されません。このような操作の例には、物理バックアップを使用したデータリカバリやカスケード操作が含まれます。説明これが発生した場合、ビジネスが許すときに再度完全なデータ移行を実行できます。ソースデータベースが MySQL 8.0.23 以降で、移行するデータに不可視列が含まれている場合、これらの列のデータが取得できないため、データ損失が発生する可能性があります。説明 `ALTER TABLE <table_name> ALTER COLUMN <column_name> SET VISIBLE;` コマンドを実行して、不可視列を可視化できます。詳細については、「不可視列」をご参照ください。
その他の制限	データは、Doris データベースの Unique または Duplicate エンジンを使用するテーブルにのみ移行できます。ターゲットテーブルが Duplicate エンジンを使用する場合、以下の場合にターゲットデータベースに重複データが存在する可能性があります。追加の列 `_is_deleted`、`_version`、および `_record_id` に基づいて重複を削除できます。移行インスタンスがリトライされた。移行インスタンスが再起動された。移行インスタンスの開始後、移行対象の同じデータレコードに対して 2 つ以上の DML 操作が実行された。説明ターゲットテーブルが Duplicate エンジンを使用する場合、DTS は UPDATE または DELETE 文を INSERT 文に変換します。選択中のオブジェクトボックスでパラメーターを設定する場合、現在、`bucket_count` パラメーター (バケット数) のみ設定できます。説明 `bucket_count` は正の整数にのみ設定できます。デフォルト値は [auto] です。データ移行中に、ターゲットの Doris データベースに新しいクラスターを作成しないでください。そうしないと、タスクは失敗します。移行インスタンスを再起動して、失敗したタスクを回復させることができます。 Doris データベースは、文字で始まるデータベース名とテーブル名のみをサポートします。移行するデータベースまたはテーブルの名前が文字で始まらない場合は、オブジェクト名マッピング機能を使用して名前を変更してください。移行するオブジェクト (データベース、テーブル、列など) の名前に中国語の文字が含まれている場合は、オブジェクト名マッピング機能を使用して名前を変更してください。たとえば、名前を英語に変更します。そうしないと、タスクが失敗する可能性があります。 DTS は、一度に複数の列を変更する DDL 操作や、同じテーブルを連続して変更する DDL 操作の移行をサポートしていません。データ移行中に、Doris データベースに Backend (BE) ノードを追加しないでください。そうしないと、タスクは失敗します。移行インスタンスを再起動して、失敗したタスクを回復させることができます。複数のソーステーブルから単一のターゲットテーブルにデータを移行する複数テーブルのマージシナリオでは、ソーステーブルのスキーマが同じであることを確認してください。そうしないと、データの不整合やタスクの失敗が発生する可能性があります。 MySQL では、`VARCHAR(M)` の M は文字長を示します。 Doris データベースでは、`VARCHAR(N)` の N はバイト長を示します。 DTS のスキーマ移行機能を使用しない場合、Doris データベースの VARCHAR フィールドの長さを MySQL の VARCHAR フィールドの長さの 4 倍に設定してください。 DMS や gh-ost ツールを使用してソースでオンライン DDL 変更を実行する場合、DTS は元の DDL 文のみをターゲットに移行します。このシナリオでは、DTS は大量の一時テーブルデータを移行する必要はありませんが、ターゲットでテーブルがロックされる可能性があります。説明 pt-online-schema-change などのツールを使用してソースで実行されたオンライン DDL 変更の移行はサポートされていません。ソースにそのような変更が存在する場合、ターゲットでのデータ損失や移行インスタンスの失敗を引き起こす可能性があります。完全なデータ移行中、DTS はソースデータベースとターゲットデータベースの読み取りおよび書き込みリソースを一部消費するため、データベースの負荷が増加する可能性があります。データ移行を実行する前に、ソースデータベースとターゲットデータベースのパフォーマンスを評価してください。オフピーク時にデータ移行を実行してください。たとえば、ソースデータベースとターゲットデータベースの CPU 負荷が 30% 未満のときに移行を実行します。完全なデータ移行には同時 INSERT 操作が含まれるため、ターゲットデータベースでテーブルの断片化が発生します。完全移行が完了した後、ターゲットデータベースのテーブルが使用するストレージ容量は、ソースインスタンスよりも大きくなります。データ移行中に、pt-online-schema-change などのツールを使用してソースデータベースの移行オブジェクトに対してオンライン DDL 変更を実行しないでください。そうしないと、移行は失敗します。データ移行中に DTS 以外のソースからターゲットデータベースにデータが書き込まれると、ソースデータベースとターゲットデータベースの間でデータの不整合が発生する可能性があります。 RDS for MySQL インスタンスで常時暗号化 (EncDB) 機能が有効になっている場合、完全なデータ移行はサポートされません。説明 TDE (透過的データ暗号化) が有効になっている RDS for MySQL インスタンスは、スキーマ移行、完全なデータ移行、および増分データ移行をサポートします。インスタンスが失敗した場合、DTS ヘルプデスクは 8 時間以内にインスタンスの回復を試みます。回復プロセス中に、インスタンスの再起動やパラメーターの調整などの操作が実行される場合があります。説明パラメーターが調整される場合、DTS インスタンスのパラメーターのみが変更され、データベースのパラメーターは変更されません。変更される可能性のあるパラメーターには、「インスタンスパラメーターの変更」で説明されているものが含まれますが、これらに限定されません。
特殊なケース	ソースデータベースが自己管理 MySQL データベースの場合：移行中のソースデータベースでのプライマリ/セカンダリのスイッチオーバーは、移行タスクの失敗を引き起こします。 DTS の遅延は、最後に移行されたデータレコードのタイムスタンプと現在のタイムスタンプを比較して計算されます。ソースデータベースで長期間 DML 操作が実行されない場合、遅延情報が不正確になることがあります。表示される遅延が長すぎる場合は、ソースデータベースで DML 操作を実行して遅延情報を更新できます。説明データベース全体を移行することを選択した場合、ハートビートテーブルを作成することもできます。ハートビートテーブルは毎秒更新または書き込みされます。 DTS は、ソースデータベースで定期的に CREATE DATABASE IF NOT EXISTS `test` コマンドを実行して、バイナリログオフセットを進めます。ソースデータベースが Amazon Aurora MySQL インスタンスまたは他のクラスター化された MySQL インスタンスである場合、タスクに設定されたドメイン名または IP アドレスとその解決結果が常に読み取り/書き込み (RW) ノードを指していることを確認してください。そうでない場合、移行タスクが期待どおりに実行されない可能性があります。ソースデータベースが RDS for MySQL インスタンスの場合：増分データを移行するために、RDS for MySQL 5.6 の読み取り専用インスタンスなど、トランザクションログを記録しない RDS for MySQL インスタンスは、ソースデータベースとして使用できません。 DTS は、ソースデータベースで定期的に CREATE DATABASE IF NOT EXISTS `test` コマンドを実行して、バイナリログオフセットを進めます。

課金

移行タイプ	リンク設定料金	データ転送料金
スキーマ移行と完全なデータ移行	無料。	この例では無料です。説明ターゲットデータベースのアクセス方法をパブリック IP アドレスに設定すると、データ転送料金が発生します。詳細については、「課金の概要」をご参照ください。
増分データ移行	有料です。詳細については、「課金の概要」をご参照ください。

増分移行でサポートされる SQL 操作

操作タイプ	SQL 操作
DML	INSERT, UPDATE, DELETE
DDL	ADD COLUMN MODIFY COLUMN CHANGE COLUMN DROP COLUMN, DROP TABLE TRUNCATE TABLE RENAME TABLE 重要 RENAME TABLE 操作は、ソースデータベースとターゲットデータベースの間でデータの不整合を引き起こす可能性があります。たとえば、移行対象としてテーブルを選択し、データ移行中にそのテーブルの名前を変更すると、このテーブルのデータはターゲットデータベースに移行されません。この状況を防ぐには、データ移行タスクを設定する際に、このテーブルが属するデータベースを移行対象として選択します。RENAME TABLE 操作の前後にテーブルが属するデータベースが、移行対象に追加されていることを確認してください。

データベースアカウントに必要な権限

データベース	スキーマ移行	完全移行	増分移行
ソース RDS MySQL インスタンス	SELECT 権限	SELECT 権限	読み取りおよび書き込み
ターゲット Doris データベース	データベースに対するアクセス権限 (Usage_priv) および読み取り書き込み権限 (Select_priv, Load_priv, Alter_priv, Create_priv, Drop_priv)

データベースアカウントを作成し、権限を付与するには：

RDS MySQL インスタンスの場合、「アカウントの作成」および「アカウントの権限変更」をご参照ください。
Doris データベースの場合、「認証と権限付与」をご参照ください。

説明

ソースデータベースアカウントが RDS MySQL コンソールで作成および権限付与されていない場合、アカウントに REPLICATION CLIENT、REPLICATION SLAVE、SHOW VIEW、および SELECT 権限があることを確認してください。

操作手順

以下のいずれかの方法でデータ移行ページに移動し、データ移行インスタンスが存在するリージョンを選択します。
DTS コンソール
1. DTS コンソールにログインします。
2. 左側のナビゲーションウィンドウで、データの移行 をクリックします。
3. ページの左上隅で、データ移行インスタンスが存在するリージョンを選択します。
DMS コンソール
説明
実際の操作は、DMS コンソールのモードとレイアウトによって異なる場合があります。詳細については、「シンプルモード」および「DMS コンソールのレイアウトとスタイルのカスタマイズ」をご参照ください。
1. DMS コンソールにログインします。
2. 上部のナビゲーションバーで、ポインターを [データ + AI] > [DTS (DTS)] > [データ移行] に移動します。
3. [データ移行タスク] の右側にあるドロップダウンリストから、データ同期インスタンスが存在するリージョンを選択します。
タスクの作成 をクリックして、タスク設定ページに移動します。

ソースデータベースとターゲットデータベースを設定します。以下の表にパラメーターを説明します。

カテゴリ	設定	注意
なし	タスク名	DTS タスクの名前。DTS は自動的にタスク名を生成します。タスクを簡単に識別できるような情報を含む名前を指定することを推奨します。一意のタスク名を指定する必要はありません。
移行元データベース	既存の接続情報の選択	DTS に登録されているデータベースインスタンスを使用する場合、ドロップダウンリストからインスタンスを選択します。DTS はインスタンスの以下のデータベースパラメーターを自動的に入力します。詳細については、「データベース接続の管理」をご参照ください。説明 DMS コンソールでは、[DMS データベースインスタンスを選択] ドロップダウンリストからデータベースインスタンスを選択できます。インスタンスを DTS に登録できない場合、または DTS に登録されているインスタンスを使用する必要がない場合は、以下のデータベース情報を設定する必要があります。
	データベースタイプ	MySQL を選択します。
	アクセス方法	Alibaba Cloud インスタンスを選択します。
	インスタンスのリージョン	ソース RDS MySQL インスタンスが存在するリージョンを選択します。
	Alibaba Cloud アカウント間でデータを複製	この例では、現在の Alibaba Cloud アカウントのデータベースインスタンスを使用します。× を選択します。
	RDS インスタンス ID	ソース RDS MySQL インスタンスの ID を選択します。
	データベースアカウント	ソース RDS MySQL インスタンスのデータベースアカウントを入力します。必要な権限については、「データベースアカウントに必要な権限」をご参照ください。
	データベースのパスワード	データベースインスタンスへのアクセスに使用するパスワード。
	暗号化	必要に応じて [非暗号化接続] または [SSL セキュア接続] を選択します。これを [SSL セキュア接続] に設定する場合は、事前に RDS for MySQL インスタンスの SSL 暗号化を有効にする必要があります。詳細については、「クラウド証明書を使用して SSL リンク暗号化を迅速に有効にする」をご参照ください。
移行先データベース	既存の接続情報の選択	DTS に登録されているデータベースインスタンスを使用する場合、ドロップダウンリストからインスタンスを選択します。DTS はインスタンスの以下のデータベースパラメーターを自動的に入力します。詳細については、「データベース接続の管理」をご参照ください。説明 DMS コンソールでは、[DMS データベースインスタンスを選択] ドロップダウンリストからデータベースインスタンスを選択できます。インスタンスを DTS に登録できない場合、または DTS に登録されているインスタンスを使用する必要がない場合は、以下のデータベース情報を設定する必要があります。
	データベースタイプ	[Doris] を選択します。
	アクセス方法	ターゲットデータベースのデプロイ場所に基づいて接続タイプを選択します。この例では ECS 上の自己管理データベースを使用します。説明他の方法で自己管理データベースを DTS に接続する場合は、必要な事前準備も行う必要があります。詳細については、「事前準備」をご参照ください。
	インスタンスのリージョン	ターゲットの Doris データベースが存在するリージョンを選択します。
	ECS インスタンス ID	ターゲットの Doris データベースをホストする ECS インスタンスの ID を選択します。説明ターゲットの Doris データベースが複数の ECS インスタンスにデプロイされている場合 (たとえば、BE または FE ノードが他の ECS インスタンスにデプロイされている場合)、ノードがデプロイされている各 ECS インスタンスのセキュリティルールに DTS サーバーの CIDR ブロックを手動で追加する必要があります。
	ポート番号	ターゲットの Doris データベースのサービスポートを入力します。デフォルトのポートは [9030] です。
	データベースアカウント	ターゲットの Doris データベースのデータベースアカウントを入力します。必要な権限については、「データベースアカウントに必要な権限」をご参照ください。
	データベースのパスワード	データベースインスタンスへのアクセスに使用するパスワード。

ページ下部で [接続をテストして次へ] をクリックし、表示される [DTS サーバーの CIDR ブロック] ダイアログボックスで 接続テスト をクリックします。
説明
DTS サーバーの CIDR ブロックが、ソースデータベースとターゲットデータベースのセキュリティ設定に自動または手動で追加され、DTS サーバーからのアクセスが許可されていることを確認してください。詳細については、「DTS サーバーの IP アドレスをホワイトリストに追加する」をご参照ください。

移行するオブジェクトを設定します。

オブジェクト設定 ページで、移行するオブジェクトを設定します。

設定	説明
移行タイプ	完全なデータ移行のみを実行するには、スキーマ移行と完全データ移行の両方を選択します。サービスを中断せずに移行を実行するには、スキーマ移行、完全データ移行、および増分データ移行を選択します。重要 MySQL から Doris へのデータ移行にはデータ型の変換が含まれます。スキーマ移行を選択しない場合は、事前にターゲットの Doris インスタンスに対応する構造を持つ Unique または Duplicate モデルのテーブルを作成する必要があります。詳細については、「データ型のマッピング」、「追加の列情報」、および「プライマリキーモデル」をご参照ください。増分データ移行を選択しない場合、データの一貫性を確保するために、データ移行中にソースインスタンスに新しいデータを書き込まないでください。
競合するテーブルの処理モード	エラーの事前チェックと報告：システムは、ターゲットデータベースに同じ名前のテーブルが存在するかどうかをチェックします。同じ名前のテーブルが存在しない場合、タスクはこの事前チェック項目をパスします。同じ名前のテーブルが存在する場合、事前チェック中にエラーが報告され、データ移行タスクは開始されません。説明ターゲットデータベースで同じ名前のテーブルを削除または名前変更できない場合は、ターゲットデータベースでテーブル名を変更できます。詳細については、「テーブル名と列名のマッピング」をご参照ください。エラーを無視して続行：ターゲットデータベースで同じ名前のテーブルのチェックをスキップします。警告エラーを無視して続行を選択すると、データの不整合が発生し、ビジネスにリスクをもたらす可能性があります。例：テーブルスキーマが一貫している場合、DTS がターゲットデータベースでソースデータベースのレコードと同じプライマリキー値を持つレコードに遭遇すると、ソースデータベースのレコードがターゲットデータベースのレコードを上書きします。テーブルスキーマが一貫していない場合、一部の列のデータのみが移行されるか、移行が失敗する可能性があります。注意して進めてください。
移行先インスタンスでのオブジェクト名の大文字化	ターゲットインスタンスのデータベース名、テーブル名、列名の大文字/小文字の区別。デフォルトでは、[DTS デフォルトポリシー] が選択されています。オブジェクト名の大文字/小文字の区別がソースまたはターゲットデータベースと一致するように、他のオプションを選択できます。詳細については、「ターゲットインスタンスでのオブジェクト名の大文字/小文字の指定」をご参照ください。
ソースオブジェクト	ソースオブジェクトセクションから 1 つ以上のオブジェクトを選択します。アイコンをクリックして、オブジェクトを選択中のオブジェクトセクションに追加します。説明データベースまたはテーブルレベルで移行するオブジェクトを選択できます。
選択中のオブジェクト	ターゲットインスタンスで移行オブジェクトの名前を変更するには、選択中のオブジェクトボックスで移行オブジェクトを右クリックします。詳細については、「データベース、テーブル、列名のマッピング」をご参照ください。移行タイプをスキーマ移行に設定すると、移行オブジェクトはテーブルレベルで選択されます。バケット数 (`bucket_count` パラメーター) を設定するには、選択中のオブジェクトリストでテーブルを右クリックします。パラメーター設定エリアで、パラメーター設定の有効化を ○ に設定し、パラメーター値を必要に応じて設定し、[OK] をクリックします。説明データベースまたはテーブルレベルで増分移行の SQL 操作を選択するには、選択中のオブジェクトボックスでターゲットオブジェクトを右クリックし、表示されるダイアログボックスで目的の SQL 操作を選択します。データをフィルタリングするための WHERE 条件を設定するには、選択中のオブジェクトボックスで移行するテーブルを右クリックし、表示されるダイアログボックスでフィルター条件を設定します。詳細については、「フィルター条件の設定」をご参照ください。オブジェクト名マッピング機能を使用する場合、マッピングされたオブジェクトに依存する他のオブジェクトの移行が失敗する可能性があります。

詳細設定へ をクリックして、詳細設定を行います。

設定	注意
タスクのスケジュールに使用する専用クラスターの選択	デフォルトでは、専用クラスターを指定しない場合、DTS は共有クラスターにデータ移行タスクをスケジュールします。データ移行タスクの安定性を向上させたい場合は、専用クラスターを購入してください。詳細については、「DTS 専用クラスターとは」をご参照ください。
失敗した接続の再試行時間	接続失敗時のリトライ時間範囲。データ移行タスク開始後にソースまたはターゲットデータベースへの接続に失敗した場合、DTS はリトライ時間範囲内ですぐに接続をリトライします。有効な値：10 から 1,440。単位：分。デフォルト値：720。パラメーターを 30 より大きい値に設定することを推奨します。指定されたリトライ時間範囲内に DTS がソースおよびターゲットデータベースに再接続された場合、DTS はデータ移行タスクを再開します。そうでない場合、データ移行タスクは失敗します。説明同じソースまたはターゲットデータベースを共有する複数のデータ移行タスクに異なるリトライ時間範囲を指定した場合、後から指定された値が優先されます。 DTS が接続をリトライする際、DTS インスタンスに対して課金されます。ビジネス要件に基づいてリトライ時間範囲を指定することを推奨します。また、ソースデータベースとターゲットインスタンスがリリースされた後、できるだけ早く DTS インスタンスをリリースすることもできます。
移行元データベースと移行先データベースで他の問題が発生した場合の、再試行までの待機時間です。	その他の問題のリトライ時間範囲。たとえば、データ移行タスク開始後に DDL または DML 操作の実行に失敗した場合、DTS はリトライ時間範囲内ですぐに操作をリトライします。有効な値：1 から 1440。単位：分。デフォルト値：10。パラメーターを 10 より大きい値に設定することを推奨します。指定されたリトライ時間範囲内に失敗した操作が正常に実行された場合、DTS はデータ移行タスクを再開します。そうでない場合、データ移行タスクは失敗します。重要移行元データベースと移行先データベースで他の問題が発生した場合の、再試行までの待機時間です。パラメーターの値は、失敗した接続の再試行時間パラメーターの値より小さくする必要があります。
完全移行率を制限するかどうか	完全なデータ移行の速度制限を有効にするかどうかを指定します。完全なデータ移行中、DTS はソースおよびターゲットデータベースの読み取りおよび書き込みリソースを使用します。これにより、データベースサーバーの負荷が増加する可能性があります。ビジネス要件に基づいて、完全なデータ移行の速度制限を有効にすることができます。速度制限を設定するには、1 秒あたりのソースデータベースのクエリ率 QPS、1 秒あたりの完全移行の行数 RPS、および 1 秒あたりの完全移行データ量 (MB) BPS パラメーターを設定する必要があります。これにより、ターゲットデータベースサーバーの負荷が軽減されます。説明このパラメーターは、移行タイプパラメーターで完全データ移行を選択した場合にのみ設定できます。
増分移行率を制限するかどうか	増分データ移行の速度制限を有効にするかどうかを指定します。速度制限を設定するには、1 秒あたりの増分移行の行数 RPS および 1 秒あたりの増分移行データ量 (MB) BPS パラメーターを設定する必要があります。これにより、ターゲットデータベースサーバーの負荷が軽減されます。説明このパラメーターは、移行タイプパラメーターで増分データ移行を選択した場合にのみ設定できます。
順方向および逆方向タスクのハートビートテーブル SQL を削除	ビジネスニーズに応じて、DTS インスタンスの実行中にソースデータベースにハートビート SQL 情報を書き込むかどうかを選択します。 [はい]：ハートビート SQL 情報はソースデータベースに書き込まれません。これにより、DTS インスタンスが遅延を報告する可能性があります。 [いいえ]：ハートビート SQL 情報をソースデータベースに書き込みます。これにより、ソースデータベースの物理バックアップやクローニングなどの機能に干渉する可能性があります。
環境タグ	必要に応じて、インスタンスを識別するための環境タグを選択できます。この例ではタグは不要です。
ETL 機能の設定	抽出、変換、ロード (ETL) 機能を有効にするかどうかを指定します。詳細については、「ETL とは？」をご参照ください。有効な値： [はい]：ETL 機能を設定します。コードエディタでデータ処理文を入力できます。詳細については、「データ移行またはデータ同期タスクで ETL を設定する」をご参照ください。 [いいえ]：ETL 機能を設定しません。
監視アラート	データ移行タスクのアラートを設定するかどうかを指定します。タスクが失敗した場合や移行遅延が指定されたしきい値を超えた場合、アラート連絡先は通知を受け取ります。有効な値： [いいえ]：アラートを設定しません。 [はい]：アラートを設定します。この場合、アラートのしきい値とアラート通知設定も設定する必要があります。詳細については、「モニタリングとアラートの設定」トピックの「DTS タスク作成時のモニタリングとアラートの設定」セクションをご参照ください。

オプション：上記の設定を完了した後、次：データベースおよびテーブルのフィールド設定 をクリックして、ターゲットデータベースのテーブルの プライマリキー列の追加、配布キー、および エンジンの選択 を設定します。
説明
- このステップは、タスクオブジェクトを設定する際に 移行タイプ を スキーマ移行 に設定した場合にのみ利用可能です。定義ステータス を すべて に設定して変更を行うことができます。
- プライマリキー列の追加 は、複数の列で構成される複合キーにすることができます。プライマリキー列の追加 の 1 つ以上を 配布キー として選択する必要があります。
- プライマリキーまたは一意制約のないテーブルの場合、エンジンの選択 を [duplicate] に設定してください。そうしないと、インスタンスが失敗したり、データ損失が発生したりする可能性があります。

タスク設定を保存し、事前チェックを実行します。
- DTS タスクを設定するために該当する API 操作を呼び出す際に指定するパラメーターを表示するには、ポインターを 次：タスク設定の保存と事前チェック に移動し、OpenAPI パラメーターのプレビュー をクリックします。
- パラメーターを表示する必要がない場合、または表示済みの場合は、ページ下部の 次：タスク設定の保存と事前チェック をクリックします。
説明
- データ移行タスクを開始する前に、DTS は事前チェックを実行します。タスクが事前チェックに合格した後にのみ、データ移行タスクを開始できます。
- タスクが事前チェックに合格しなかった場合は、各失敗項目の横にある [詳細の表示] をクリックします。チェック結果に基づいて原因を分析した後、問題をトラブルシューティングします。その後、再度事前チェックを実行します。
- 事前チェック中に項目に対してアラートがトリガーされた場合：
  アラート項目が無視できない場合は、失敗した項目の横にある [詳細の表示] をクリックして問題をトラブルシューティングします。その後、再度事前チェックを実行します。
  アラート項目が無視できる場合は、[アラート詳細の確認] をクリックします。[詳細の表示] ダイアログボックスで、[無視] をクリックします。表示されるメッセージで、[OK] をクリックします。その後、[再度事前チェック] をクリックして再度事前チェックを実行します。アラート項目を無視すると、データの不整合が発生し、ビジネスに潜在的なリスクをもたらす可能性があります。

インスタンスを購入します。

[成功率] が [100%] になるまで待ちます。その後、[次へ：インスタンスの購入] をクリックします。

[インスタンスの購入] ページで、データ移行インスタンスのインスタンスクラスパラメーターを設定します。以下の表にパラメーターを説明します。

セクション	パラメーター	説明
新しいインスタンスクラス	[リソースグループ]	データ移行インスタンスが属するリソースグループ。デフォルト値：[デフォルトリソースグループ]。詳細については、「Resource Management とは？」をご参照ください。
新しいインスタンスクラス	インスタンスクラス	DTS は、移行速度が異なるインスタンスクラスを提供します。ビジネスシナリオに基づいてインスタンスクラスを選択できます。詳細については、「データ移行インスタンスのインスタンスクラス」をご参照ください。

チェックボックスを選択して、[Data Transmission Service (Pay-as-you-go) Service Terms] を読み、同意します。
[購入して開始] をクリックします。表示されるメッセージで、[OK] をクリックします。
[データ移行] ページでタスクの進行状況を確認できます。
説明
- データ移行タスクが増分データの移行に使用できない場合、タスクは自動的に停止します。[ステータス] セクションに [完了] が表示されます。
- データ移行タスクが増分データの移行に使用できる場合、タスクは自動的に停止しません。増分データ移行タスクは決して停止または完了しません。[ステータス] セクションに [実行中] が表示されます。

データ型のマッピング

カテゴリ	MySQL データ型	Doris データ型
数値	TINYINT	TINYINT
	TINYINT UNSIGNED	SMALLINT
	SMALLINT	SMALLINT
	SMALLINT UNSIGNED	INT
	MEDIUMINT	INT
	MEDIUMINT UNSIGNED	BIGINT
	INT	INT
	INT UNSIGNED	BIGINT
	BIGINT	BIGINT
	BIGINT UNSIGNED	LARGEINT
	BIT(M)	INT
	Decimal	Decimal 説明 zerofill 属性はサポートされていません。
	Numeric	Decimal
	Float	Float
	Double	DOUBLE
	BOOL BOOLEAN	BOOLEAN
日付と時刻	DATE	DATEV2
	DATETIME[(fsp)]	DATETIMEV2
	Timestamp[(fsp)]	DATETIMEV2
	Time[(fsp)]	VARCHAR
	YEAR[(4)]	INT
文字列	CHAR VARCHAR	VARCHAR 重要データ損失を防ぐため、CHAR および VARCHAR(n) 型のデータは Doris に移行された後、VARCHAR(4*n) に変換されます。データ長が指定されていない場合、Doris のデフォルト値 VARCHAR(65533) が使用されます。データ長が 65533 を超える場合、データは Doris に移行された後、STRING に変換されます。
	BINARY VARBINARY	STRING
	TINYTEXT TEXT MEDIUMTEXT LONGTEXT	STRING
	TINYBLOB BLOB MEDIUMBOLB LONGBLOB	STRING
	ENUM	STRING
	SET	STRING
	JSON	STRING

追加の列情報

説明

以下の表は、DTS が自動的に追加するか、または Duplicate データモデルを使用するターゲットテーブルに手動で追加する必要がある追加の列について説明しています。

名前	データ型	デフォルト値	説明
_is_deleted	Int	0	データが削除されたかどうかを示します。 Insert：値は 0 です。 Update：値は 0 です。 Delete：値は 1 です。
_version	Bigint	0	完全なデータ移行の場合：値は 0 です。増分データ移行の場合：ソースデータベースのバイナリログに対応する UNIX タイムスタンプ (秒単位)。
_record_id	Bigint	0	完全なデータ移行の場合：値は 0 です。増分データ移行の場合：増分ログのレコード ID。この ID はログの一意の識別子です。説明 ID 値は一意で増分します。