MySQL から Doris へのデータ移行 - Data Transmission Service - Alibaba Cloud ドキュメントセンター

Data Transmission Service (DTS) は、自己管理 MySQL データベースや RDS for MySQL インスタンスなどの MySQL データベースから、ビッグデータ分析用の Doris データベースへのデータ移行をサポートしています。このトピックでは、RDS for MySQL インスタンス (ソースデータベース) から ECS インスタンスにデプロイされた Doris データベース (ターゲットデータベース) にデータを移行する方法について説明します。

準備

ターゲットの Doris データベースを作成します。このデータベースの利用可能なストレージ容量が、ソースの RDS for MySQL インスタンスが使用するストレージ容量よりも大きいことを確認してください。

説明

ソースデータベースとターゲットデータベースでサポートされているバージョンの詳細については、「データ移行シナリオの概要」をご参照ください。

使用上の注意

タイプ	説明
ソースデータベースの制限	帯域幅要件: ソースデータベースをホストするサーバーには、十分なアウトバウンド帯域幅が必要です。そうでない場合、データ移行速度が影響を受けます。増分移行を実行する場合、バイナリログ: 有効にする必要があり、`binlog_format` は `ROW` に、`binlog_row_image` は `FULL` に設定する必要があります。そうでない場合、事前チェック中にエラーが報告され、データ移行タスクを開始できません。重要ソースの自己管理 MySQL データベースが、各インスタンスが他方のプライマリであるデュアルプライマリクラスターである場合、`log_slave_updates` パラメーターを有効にする必要があります。これにより、DTS がすべてのバイナリログを取得できるようになります。 RDS for MySQL インスタンスのローカルバイナリログは、少なくとも 3 日間 (7 日間を推奨) 保持する必要があります。自己管理 MySQL データベースのローカルバイナリログは、少なくとも 7 日間保持する必要があります。そうでない場合、DTS タスクはバイナリログを取得できないため失敗する可能性があります。極端な場合、これによりデータの不整合やデータ損失が発生する可能性があります。DTS の要件よりも短いバイナリログ保持期間を設定することによって引き起こされる問題は、DTS の SLA (サービスレベルアグリーメント) の対象外です。説明 RDS for MySQL インスタンスのローカルバイナリログの [保持期間] の設定方法の詳細については、「ローカルログを自動的に削除する」をご参照ください。移行オブジェクトの要件: 移行するすべてのテーブルにプライマリキーまたは一意制約がある: テーブルフィールドが一意であることを確認してください。そうでない場合、ターゲットデータベースに重複データが存在する可能性があります。移行オブジェクトに、プライマリキーまたは一意制約のないテーブルが含まれている: インスタンスを構成するときは、移行タイプを選択し、次にスキーマ移行を選択します。データベーステーブル列の設定ステップで、これらのテーブルのエンジンの選択を [duplicate] に設定します。そうでない場合、インスタンスが失敗したり、データが失われたりする可能性があります。説明スキーマ移行中、DTS はターゲットテーブルにフィールドを追加します。詳細については、「追加の列」をご参照ください。テーブルを移行し、それらを編集する必要がある場合 (たとえば、列名をマッピングする場合)、単一のデータ移行タスクは最大 1,000 個のテーブルをサポートします。この制限を超えると、タスクの送信時にエラーが報告されます。この場合、テーブルを複数の移行タスクに分割するか、データベース全体を移行するようにタスクを構成します。ソースデータベースの操作制限: スキーマ移行および完全データ移行中は、データベースまたはテーブルスキーマを変更する DDL 操作を実行しないでください。そうでない場合、データ移行タスクは失敗します。完全データ移行のみを実行する場合は、ソースインスタンスに新しいデータを書き込まないでください。そうでない場合、ソースデータベースとターゲットデータベースの間でデータの不整合が発生します。リアルタイムのデータ整合性を維持するには、スキーマ移行、完全データ移行、および増分データ移行を選択します。移行中、物理バックアップの復元やカスケード操作からのデータなど、バイナリログに記録されない操作によって生成されたデータは、ターゲットデータベースに移行されません。説明これが発生した場合、ビジネスが許すときに完全データを再度移行できます。ソースデータベースが MySQL 8.0.23 以降で、移行するデータに不可視列が含まれている場合、これらの列のデータを取得できないため、データ損失が発生する可能性があります。説明 `ALTER TABLE <table_name> ALTER COLUMN <column_name> SET VISIBLE;` コマンドを実行して、不可視列を可視にすることができます。詳細については、「不可視列」をご参照ください。プライマリキーのないテーブルは、自動的に不可視プライマリキーを生成します。この不可視プライマリキーも可視にする必要があります。詳細については、「生成された不可視プライマリキー」をご参照ください。
その他の制限	Doris データベースでは、Unique Key または Duplicate Key モデルを使用するテーブルにのみデータを移行できます。ターゲットテーブルが Duplicate Key モデルを使用する場合、次の場合にターゲットデータベースに重複データが存在する可能性があります。追加の列 (_is_deleted、_version、および _record_id) に基づいてデータを重複排除できます。データ移行インスタンスでリトライ操作が発生しました。データ移行インスタンスで再起動操作が実行されました。データ移行インスタンスの開始後、移行対象のデータの同じ行に対して 2 つ以上の DML 操作が実行されました。説明ターゲットテーブルが Duplicate Key モデルを使用する場合、DTS は UPDATE または DELETE 文を INSERT 文に変換します。選択中のオブジェクトボックスでパラメーターを設定する場合、`bucket_count` (バケット数) パラメーターのみを設定できます。説明 `bucket_count` パラメーターの値は正の整数である必要があります。デフォルト値は [auto] です。データ移行中に、ターゲットの Doris データベースにクラスターを作成しないでください。そうしないと、データ移行タスクが失敗します。移行インスタンスを再起動して、失敗したタスクを再開できます。 Doris データベースは、文字で始まるデータベース名とテーブル名のみをサポートします。移行するデータベースまたはテーブルの名前が文字で始まらない場合は、オブジェクト名マッピング機能を使用して名前を変更する必要があります。データベース、テーブル、列など、移行するオブジェクトの名前に漢字が含まれている場合は、オブジェクト名マッピング機能を使用して、たとえば英語に名前を変更する必要があります。そうしないと、タスクが失敗する可能性があります。一度に複数の列を変更したり、同じテーブルを連続して変更したりする DDL 操作は実行できません。データ移行中に、Doris データベースに Backend (BE) ノードを追加しないでください。そうしないと、タスクが失敗します。移行インスタンスを再起動して、失敗したタスクを再開できます。 MySQL では、`VARCHAR(M)` データ型の M は文字長を表します。Doris データベースでは、`VARCHAR(N)` データ型の N はバイト長を表します。DTS のスキーマ移行機能を使用しない場合は、Doris データベースの VARCHAR フィールドの長さを MySQL データベースの VARCHAR フィールドの長さの 4 倍に設定することをお勧めします。完全データ移行中、DTS はソースデータベースとターゲットデータベースの読み取りおよび書き込みリソースの一部を消費するため、データベースの負荷が増加する可能性があります。データを移行する前に、ソースデータベースとターゲットデータベースのパフォーマンスを評価してください。オフピーク時間帯、たとえばソースデータベースとターゲットデータベースの CPU 負荷が 30% 未満のときにデータを移行することをお勧めします。完全データ移行には同時 INSERT 操作が含まれるため、ターゲットデータベースのテーブルに断片化が発生します。完全データ移行が完了すると、ターゲットデータベースのテーブルで使用されるストレージ容量は、ソースインスタンスよりも大きくなります。データ移行中に、pt-online-schema-change などのツールを使用してソースデータベースの移行オブジェクトに対してオンライン DDL 操作を実行しないでください。そうしないと、移行が失敗します。データ移行中に DTS 以外のソースからのデータがターゲットデータベースに書き込まれると、ソースデータベースとターゲットデータベースの間でデータの不整合が発生する可能性があります。 RDS for MySQL インスタンスで常時機密機能が有効になっている場合、完全データ移行はサポートされません。説明 TDE (透過的データ暗号化) が有効になっている RDS for MySQL インスタンスは、スキーマ移行、完全データ移行、および増分データ移行をサポートします。インスタンスに障害が発生した場合、DTS ヘルプデスクは 8 時間以内にインスタンスの回復を試みます。回復プロセス中に、インスタンスの再起動やパラメーターの調整などの操作が実行される場合があります。説明パラメーターが調整されると、DTS インスタンスのパラメーターのみが変更されます。データベースのパラメーターは変更されません。変更される可能性のあるパラメーターには、インスタンスパラメーターの変更で説明されているものが含まれますが、これらに限定されません。
特殊なケース	ソースが自己管理 MySQL データベースの場合: 移行中のソースデータベースでのプライマリ/セカンダリフェールオーバーにより、移行タスクが失敗します。 DTS の遅延は、最後に移行されたデータレコードの UNIX タイムスタンプと現在の UNIX タイムスタンプを比較することによって計算されます。ソースデータベースで DML 操作が長時間実行されない場合、遅延情報が不正確になることがあります。表示される遅延が長すぎる場合は、ソースデータベースで DML 操作を実行して遅延情報を更新できます。説明データベース全体を移行する場合は、毎秒更新または書き込みが行われるハートビートテーブルを作成することもできます。 DTS は、ソースデータベースで定期的に CREATE DATABASE IF NOT EXISTS `test` コマンドを実行して、バイナリログのオフセットを進めます。ソースデータベースが Amazon Aurora MySQL インスタンスまたは別のクラスター化された MySQL インスタンスである場合は、タスクに構成されたドメイン名または IP アドレスとその解決結果が常に読み取り/書き込み (RW) ノードを指すようにしてください。そうしないと、移行タスクが期待どおりに実行されない可能性があります。ソースが RDS for MySQL インスタンスの場合: 増分データを移行するには、RDS for MySQL 5.6 の読み取り専用インスタンスなど、トランザクションログを記録しない RDS for MySQL インスタンスをソースとして使用することはできません。 DTS は、ソースデータベースで定期的に CREATE DATABASE IF NOT EXISTS `test` コマンドを実行して、バイナリログのオフセットを進めます。

課金

移行タイプ	タスク構成料金	データ転送料金
スキーマ移行と完全データ移行	無料です。	この例は無料です。説明ターゲットデータベースのアクセス方法がパブリック IP アドレスに設定されている場合、データ転送料金が課金されます。詳細については、「課金の概要」をご参照ください。
増分データ移行	課金されます。詳細については、「課金の概要」をご参照ください。

増分移行をサポートする SQL 操作

操作タイプ	SQL 文
DML	INSERT, UPDATE, DELETE
DDL	ADD COLUMN MODIFY COLUMN CHANGE COLUMN DROP COLUMN, DROP TABLE TRUNCATE TABLE RENAME TABLE 重要 RENAME TABLE 操作は、ソースデータベースとターゲットデータベースの間でデータの不整合を引き起こす可能性があります。たとえば、データ移行中に移行対象としてテーブルを選択し、そのテーブルの名前を変更すると、このテーブルのデータはターゲットデータベースに移行されません。この状況を防ぐには、データ移行タスクを構成するときに、このテーブルが属するデータベースを移行対象として選択します。RENAME TABLE 操作の前後にテーブルが属するデータベースが移行対象に追加されていることを確認してください。

データベースアカウントに必要な権限

データベース	スキーマ移行	完全移行	増分移行
ソース RDS for MySQL インスタンス	SELECT 権限	SELECT 権限	読み取りおよび書き込み権限
ターゲット Doris データベース	データベースアクセス権限 (Usage_priv) および読み取り/書き込み権限 (Select_priv、Load_priv、Alter_priv、Create_priv、および Drop_priv)

データベースアカウントを作成して権限を付与するには:

RDS for MySQL インスタンスの場合、詳細については、「アカウントの作成」および「アカウント権限の変更」をご参照ください。
Doris データベースの場合、詳細については、「」認証と権限付与をご参照ください。

説明

使用するソースデータベースアカウントが RDS for MySQL コンソールで作成および承認されていない場合は、アカウントに REPLICATION CLIENT、REPLICATION SLAVE、SHOW VIEW、および SELECT 権限があることを確認してください。

手順

次のいずれかの方法を使用してデータ移行ページに移動し、データ移行インスタンスが存在するリージョンを選択します。
DTS コンソール
1. DTS コンソールにログインします。
2. 左側のナビゲーションウィンドウで、データの移行 をクリックします。
3. ページの左上隅で、データ移行インスタンスが存在するリージョンを選択します。
DMS コンソール
説明
実際の操作は、DMS コンソールのモードとレイアウトによって異なる場合があります。詳細については、「シンプルモード」および「DMS コンソールのレイアウトとスタイルをカスタマイズする」をご参照ください。
1. DMS コンソールにログインします。
2. 上部のナビゲーションバーで、ポインターを [データ + AI] > [DTS (DTS)] > [データ移行] の上に移動します。
3. [データ移行タスク] の右側にあるドロップダウンリストから、データ同期インスタンスが存在するリージョンを選択します。
タスクの作成 をクリックして、タスク構成ページに移動します。

ソースデータベースとターゲットデータベースを構成します。次の表にパラメーターを示します。

カテゴリ	構成	説明
なし	タスク名	DTS タスクの名前。DTS は自動的にタスク名を生成します。タスクを簡単に識別できるような情報を含む名前を指定することをお勧めします。一意のタスク名を指定する必要はありません。
移行元データベース	既存の接続情報の選択	DTS に登録されているデータベースインスタンスを使用する場合は、ドロップダウンリストからインスタンスを選択します。DTS は、インスタンスの次のデータベースパラメーターを自動的に入力します。詳細については、「データベース接続の管理」をご参照ください。説明 DMS コンソールでは、[DMS データベースインスタンスの選択] ドロップダウンリストからデータベースインスタンスを選択できます。 DTS へのインスタンスの登録に失敗した場合、または DTS に登録されているインスタンスを使用する必要がない場合は、次のデータベース情報を構成する必要があります。
	データベースタイプ	MySQL を選択します。
	アクセス方法	Alibaba Cloud インスタンスを選択します。
	インスタンスのリージョン	ソース RDS for MySQL インスタンスが存在するリージョンを選択します。
	Alibaba Cloud アカウント間でデータを複製	この例では、現在の Alibaba Cloud アカウントのデータベースインスタンスが使用されます。× を選択します。
	RDS インスタンス ID	ソース RDS for MySQL インスタンスのインスタンス ID を選択します。
	データベースアカウント	ソース RDS for MySQL インスタンスのデータベースアカウントを入力します。必要な権限の詳細については、「データベースアカウントに必要な権限」をご参照ください。
	データベースのパスワード	データベースインスタンスへのアクセスに使用されるパスワード。
	暗号化	データベースへの接続を暗号化するかどうかを指定します。ビジネス要件に基づいて [非暗号化] または [SSL 暗号化] を選択できます。このパラメーターを [SSL 暗号化] に設定する場合は、DTS タスクを構成する前に ApsaraDB RDS for MySQL インスタンスの SSL 暗号化を有効にする必要があります。詳細については、「クラウド証明書を使用して SSL 暗号化を有効にする」をご参照ください。
移行先データベース	既存の接続情報の選択	DTS に登録されているデータベースインスタンスを使用する場合は、ドロップダウンリストからインスタンスを選択します。DTS は、インスタンスの次のデータベースパラメーターを自動的に入力します。詳細については、「データベース接続の管理」をご参照ください。説明 DMS コンソールでは、[DMS データベースインスタンスの選択] ドロップダウンリストからデータベースインスタンスを選択できます。 DTS へのインスタンスの登録に失敗した場合、または DTS に登録されているインスタンスを使用する必要がない場合は、次のデータベース情報を構成する必要があります。
	データベースタイプ	[Doris] を選択します。
	アクセス方法	ターゲットデータベースのデプロイ場所に基づいて接続タイプを選択します。この例では ECS 上の自己管理データベースを使用します。説明他の接続タイプを使用して自己管理データベースに接続する場合は、追加の準備を行う必要があります。詳細については、「準備」をご参照ください。
	インスタンスのリージョン	ターゲットの Doris データベースが存在するリージョンを選択します。
	ECS インスタンス ID	ターゲットの Doris データベースが存在する ECS インスタンスの ID を選択します。説明ターゲットの Doris データベースが複数の ECS インスタンスにデプロイされている場合 (たとえば、BE または FE ノードが他の ECS インスタンスにデプロイされている場合)、ノードがデプロイされている各 ECS インスタンスのセキュリティルールに DTS サーバーの CIDR ブロックを手動で追加する必要があります。
	ポート番号	ターゲットの Doris データベースのサービスポートを入力します。デフォルトのポートは 9030 です。
	データベースアカウント	ターゲットの Doris データベースのデータベースアカウントを入力します。必要な権限の詳細については、「データベースアカウントに必要な権限」をご参照ください。
	データベースのパスワード	データベースインスタンスへのアクセスに使用されるパスワード。

ページの下部で [接続をテストして続行] をクリックし、表示される [DTS サーバーの CIDR ブロック] ダイアログボックスで 接続テスト をクリックします。
説明
DTS サーバーからのアクセスを許可するために、DTS サーバーの CIDR ブロックがソースデータベースとターゲットデータベースのセキュリティ設定に自動または手動で追加できることを確認してください。詳細については、「DTS サーバーの IP アドレスをホワイトリストに追加する」をご参照ください。

移行するオブジェクトを構成します。

オブジェクト設定 ページで、移行するオブジェクトを構成します。

構成	説明
移行タイプ	完全データ移行のみを実行するには、スキーマ移行と完全データ移行の両方を選択します。ゼロダウンタイム移行を実行するには、スキーマ移行、完全データ移行、および増分データ移行を選択します。重要 MySQL から Doris にデータを移行する場合、データ型が変換されます。スキーマ移行を選択しない場合は、事前にターゲットの Doris データベースに適切なスキーマを持つ Unique Key または Duplicate Key モデルを使用するテーブルを作成する必要があります。詳細については、「データ型のマッピング」、「追加の列」、および「プライマリキーモデル」をご参照ください。増分データ移行を選択しない場合は、データの一貫性を確保するために、データ移行中にソースインスタンスに新しいデータを書き込まないでください。
競合するテーブルの処理モード	エラーの事前チェックと報告: ターゲットデータベースにソースデータベースのテーブルと同じ名前のテーブルが含まれているかどうかをチェックします。ソースデータベースとターゲットデータベースに同じテーブル名のテーブルが含まれていない場合、事前チェックは合格します。そうでない場合、事前チェック中にエラーが返され、データ移行タスクを開始できません。説明ソースデータベースとターゲットデータベースに同じ名前のテーブルが含まれており、ターゲットデータベースのテーブルを削除または名前変更できない場合は、オブジェクト名マッピング機能を使用して、ターゲットデータベースに移行されるテーブルの名前を変更できます。詳細については、「オブジェクト名のマッピング」をご参照ください。エラーを無視して続行: ソースデータベースとターゲットデータベースの同じテーブル名の事前チェックをスキップします。警告エラーを無視して続行を選択すると、データの不整合が発生し、ビジネスが次の潜在的なリスクにさらされる可能性があります: ソースデータベースとターゲットデータベースのスキーマが同じで、データレコードのプライマリキーがターゲットデータベースの既存のデータレコードと同じである場合、次のシナリオが発生する可能性があります: 完全データ移行中、DTS はデータレコードをターゲットデータベースに移行しません。ターゲットデータベースの既存のデータレコードは保持されます。増分データ移行中、DTS はデータレコードをターゲットデータベースに移行します。ターゲットデータベースの既存のデータレコードは上書きされます。ソースデータベースとターゲットデータベースのスキーマが異なる場合、特定の列のみが移行されるか、データ移行タスクが失敗します。注意して進めてください。
移行先インスタンスでのオブジェクト名の大文字化	宛先インスタンスのデータベース名、テーブル名、および列名の大文字/小文字。デフォルトでは、[DTS デフォルトポリシー] が選択されています。他のオプションを選択して、オブジェクト名の大文字/小文字がソースまたは宛先データベースのものと一致するようにすることができます。詳細については、「宛先インスタンスでのオブジェクト名の大文字/小文字の指定」をご参照ください。
ソースオブジェクト	ソースオブジェクトセクションから 1 つ以上のオブジェクトを選択します。アイコンをクリックして、オブジェクトを選択中のオブジェクトセクションに追加します。説明移行オブジェクトとしてデータベースまたはテーブルを選択できます。
選択中のオブジェクト	宛先インスタンスの移行オブジェクトの名前を変更するには、選択中のオブジェクトボックスで移行オブジェクトを右クリックします。詳細については、「オブジェクト名のマッピング」をご参照ください。移行タイプでスキーマ移行を選択し、移行オブジェクトとしてテーブルを選択し、バケット数 (`bucket_count` パラメーター) を設定する必要がある場合は、選択中のオブジェクトボックスで移行するテーブルを右クリックします。パラメーター設定セクションで、パラメーター設定の有効化を ○ に設定し、パラメーター値を必要に応じて設定し、[OK] をクリックします。説明データベースまたはテーブルレベルで移行する増分 SQL 操作を選択するには、選択中のオブジェクトボックスで移行オブジェクトを右クリックし、表示されるダイアログボックスで目的の SQL 操作を選択します。 WHERE 条件を設定してデータをフィルタリングするには、選択中のオブジェクトボックスで移行するテーブルを右クリックし、表示されるダイアログボックスでフィルター条件を設定します。詳細については、「フィルター条件の設定」をご参照ください。オブジェクト名マッピング機能を使用する場合、マッピングされたオブジェクトに依存する他のオブジェクトの移行が失敗する可能性があります。

次へ：詳細設定 をクリックして詳細設定を構成します。

構成	説明
タスクのスケジュールに使用する専用クラスターの選択	デフォルトでは、専用クラスターを指定しない場合、DTS はデータ移行タスクを共有クラスターにスケジュールします。データ移行タスクの安定性を向上させたい場合は、専用クラスターを購入してください。詳細については、「DTS 専用クラスターとは」をご参照ください。
失敗した接続の再試行時間	失敗した接続のリトライ時間範囲。データ移行タスクの開始後にソースまたはターゲットデータベースへの接続に失敗した場合、DTS はリトライ時間範囲内で直ちに接続をリトライします。有効な値: 10 から 1,440。単位: 分。デフォルト値: 720。パラメーターを 30 より大きい値に設定することをお勧めします。指定されたリトライ時間範囲内に DTS がソースおよびターゲットデータベースに再接続されると、DTS はデータ移行タスクを再開します。そうでない場合、データ移行タスクは失敗します。説明同じソースまたはターゲットデータベースを共有する複数のデータ移行タスクに異なるリトライ時間範囲を指定した場合、後で指定された値が優先されます。 DTS が接続をリトライすると、DTS インスタンスに対して課金されます。ビジネス要件に基づいてリトライ時間範囲を指定することをお勧めします。ソースデータベースとターゲットインスタンスがリリースされた後、できるだけ早く DTS インスタンスをリリースすることもできます。
移行元データベースと移行先データベースで他の問題が発生した場合の、再試行までの待機時間です。	その他の問題のリトライ時間範囲。たとえば、データ移行タスクの開始後に DDL または DML 操作の実行に失敗した場合、DTS はリトライ時間範囲内で直ちに操作をリトライします。有効な値: 1 から 1440。単位: 分。デフォルト値: 10。パラメーターを 10 より大きい値に設定することをお勧めします。指定されたリトライ時間範囲内に失敗した操作が正常に実行されると、DTS はデータ移行タスクを再開します。そうでない場合、データ移行タスクは失敗します。重要移行元データベースと移行先データベースで他の問題が発生した場合の、再試行までの待機時間です。パラメーターの値は、失敗した接続の再試行時間パラメーターの値より小さくする必要があります。
完全移行率を制限するかどうか	完全データ移行のスロットリングを有効にするかどうかを指定します。完全データ移行中、DTS はソースデータベースとターゲットデータベースの読み取りおよび書き込みリソースを使用します。これにより、データベースサーバーの負荷が増加する可能性があります。ビジネス要件に基づいて完全データ移行のスロットリングを有効にすることができます。スロットリングを構成するには、1 秒あたりのソースデータベースのクエリ率 QPS、1 秒あたりの完全移行の行数 RPS、および 1 秒あたりの完全移行データ量 (MB) BPS パラメーターを構成する必要があります。これにより、ターゲットデータベースサーバーの負荷が軽減されます。説明このパラメーターは、移行タイプパラメーターで完全データ移行を選択した場合にのみ構成できます。
増分移行率を制限するかどうか	増分データ移行のスロットリングを有効にするかどうかを指定します。スロットリングを構成するには、1 秒あたりの増分移行の行数 RPS および 1 秒あたりの増分移行データ量 (MB) BPS パラメーターを構成する必要があります。これにより、ターゲットデータベースサーバーの負荷が軽減されます。説明このパラメーターは、移行タイプパラメーターで増分データ移行を選択した場合にのみ構成できます。
順方向および逆方向タスクのハートビートテーブル SQL を削除	DTS インスタンスの実行中にハートビートテーブルに対する SQL 操作をソースデータベースに書き込むかどうかを指定します。有効な値: [はい]: ハートビートテーブルに対する SQL 操作を書き込みません。この場合、DTS インスタンスの遅延が表示されることがあります。 [いいえ]: ハートビートテーブルに対する SQL 操作を書き込みます。この場合、ソースデータベースの物理バックアップやクローン作成などの機能が影響を受ける可能性があります。
環境タグ	必要に応じて環境タグを選択してインスタンスを識別できます。この例ではタグは必要ありません。
ETL の設定	抽出・変換・書き出し (ETL) 機能を有効にするかどうかを指定します。詳細については、「ETL とは」をご参照ください。有効な値: [はい]: ETL 機能を構成します。コードエディタにデータ処理文を入力できます。詳細については、「データ移行またはデータ同期タスクで ETL を構成する」をご参照ください。 [いいえ]: ETL 機能を構成しません。
監視アラート	データ移行タスクのアラートを構成するかどうかを指定します。タスクが失敗した場合、または移行遅延が指定されたしきい値を超えた場合、アラート連絡先は通知を受け取ります。有効な値: [いいえ]: アラートを構成しません。 [はい]: アラートを構成します。この場合、アラートのしきい値とアラート通知設定も構成する必要があります。詳細については、「DTS タスク作成時のモニタリングとアラートの設定」トピックの「DTS タスク作成時のモニタリングとアラートの設定」セクションをご参照ください。

オプション: 上記の設定が完了したら、次：データベースおよびテーブルのフィールド設定 をクリックして、ターゲットテーブルの プライマリキー列の追加、配布キー、および エンジンの選択 を設定します。
説明
- このステップは、移行オブジェクトを構成するときに 移行タイプ で スキーマ移行 を選択した場合にのみ使用できます。定義ステータス を すべて に設定してから、設定を変更できます。
- プライマリキー列の追加 に複合プライマリキーを形成するために複数の列を選択できます。プライマリキー列の追加 から 1 つ以上の列を 配布キー として選択する必要があります。
- プライマリキーまたは一意制約のないテーブルの場合、エンジンの選択 を [duplicate] に設定する必要があります。そうしないと、移行が失敗したり、データが失われたりする可能性があります。

タスク設定を保存して事前チェックを実行します。
- 関連する API 操作を呼び出して DTS タスクを構成するときに指定するパラメーターを表示するには、ポインターを 次：タスク設定の保存と事前チェック の上に移動し、OpenAPI パラメーターのプレビュー をクリックします。
- パラメーターを表示する必要がない場合、または表示した場合は、ページの下部にある 次：タスク設定の保存と事前チェック をクリックします。
説明
- データ移行タスクを開始する前に、DTS は事前チェックを実行します。タスクが事前チェックに合格した後にのみ、データ移行タスクを開始できます。
- タスクが事前チェックに合格しなかった場合は、失敗した各項目の横にある [詳細の表示] をクリックします。チェック結果に基づいて原因を分析した後、問題をトラブルシューティングします。次に、再度事前チェックを実行します。
- 事前チェック中に項目のアラートがトリガーされた場合:
  アラート項目を無視できない場合は、失敗した項目の横にある [詳細の表示] をクリックして問題をトラブルシューティングします。次に、再度事前チェックを実行します。
  アラート項目を無視できる場合は、[アラート詳細の確認] をクリックします。[詳細の表示] ダイアログボックスで、[無視] をクリックします。表示されるメッセージで、[OK] をクリックします。次に、[再度事前チェック] をクリックして再度事前チェックを実行します。アラート項目を無視すると、データの不整合が発生し、ビジネスが潜在的なリスクにさらされる可能性があります。

インスタンスを購入します。

[成功率] が [100%] になるまで待ちます。次に、[次へ: インスタンスの購入] をクリックします。

[インスタンスの購入] ページで、データ移行インスタンスのインスタンスクラスパラメーターを構成します。次の表にパラメーターを示します。

セクション	パラメーター	説明
新しいインスタンスクラス	[リソースグループ]	データ移行インスタンスが属するリソースグループ。デフォルト値: [デフォルトのリソースグループ]。詳細については、「Resource Management とは」をご参照ください。
新しいインスタンスクラス	インスタンスクラス	DTS は、移行速度が異なるインスタンスクラスを提供します。ビジネスシナリオに基づいてインスタンスクラスを選択できます。詳細については、「データ移行インスタンスのインスタンスクラス」をご参照ください。

[Data Transmission Service (従量課金) サービス規約] を読んで同意し、チェックボックスをオンにします。
[購入して開始] をクリックします。表示されるメッセージで、[OK] をクリックします。
[データ移行] ページでタスクの進行状況を表示できます。
説明
- データ移行タスクを使用して増分データを移行できない場合、タスクは自動的に停止します。[ステータス] セクションに [完了] が表示されます。
- データ移行タスクを使用して増分データを移行できる場合、タスクは自動的に停止しません。増分データ移行タスクは停止も完了もしません。[ステータス] セクションに [実行中] が表示されます。

データ型のマッピング

カテゴリ	MySQL のデータ型	Doris のデータ型
数値	TINYINT	TINYINT
	TINYINT UNSIGNED	SMALLINT
	SMALLINT	SMALLINT
	SMALLINT UNSIGNED	INT
	MEDIUMINT	INT
	MEDIUMINT UNSIGNED	BIGINT
	INT	INT
	INT UNSIGNED	BIGINT
	BIGINT	BIGINT
	BIGINT UNSIGNED	LARGEINT
	BIT(M)	INT
	Decimal	Decimal 説明 ZEROFILL はサポートされていません。
	Numeric	Decimal
	Float	Float
	Double	DOUBLE
	BOOL BOOLEAN	BOOLEAN
日付と時刻	DATE	DATEV2
	DATETIME[(fsp)]	DATETIMEV2
	Timestamp[(fsp)]	DATETIMEV2
	Time[(fsp)]	VARCHAR
	YEAR[(4)]	INT
文字列	CHAR VARCHAR	VARCHAR 重要データ損失を避けるため、CHAR および VARCHAR(n) 型のデータは、ターゲットの Doris データベースに移行された後、VARCHAR(4*n) に変換されます。データ長を指定しない場合、デフォルト値 VARCHAR(65533) が使用されます。データ長が 65533 を超える場合、データはターゲットの Doris データベースに移行された後、STRING 型に変換されます。
	BINARY VARBINARY	STRING
	TINYTEXT TEXT MEDIUMTEXT LONGTEXT	STRING
	TINYBLOB BLOB MEDIUMBOLB LONGBLOB	STRING
	ENUM	STRING
	SET	STRING
	JSON	STRING

追加の列

説明

次の表は、DTS が自動的に追加するか、Duplicate モデルを使用するターゲットテーブルに手動で追加する必要がある追加の列について説明しています。

名前	データの型	デフォルト値	説明
_is_deleted	Int	0	データが削除されたかどうかを示します。挿入: 値は 0 です。更新: 値は 0 です。削除: 値は 1 です。
_version	Bigint	0	完全データ移行の場合、値は 0 です。増分データ移行の場合、値はソースバイナリログからの秒単位のタイムスタンプです。
_record_id	Bigint	0	完全データ移行の場合、値は 0 です。増分データ移行の場合、値は増分ログエントリのレコード ID です。この ID はログエントリを一意に識別します。説明 ID は一意で自動インクリメントされます。