Data Transmission Service:Synchronize data from a self-managed Oracle database to a PolarDB for MySQL cluster

Limites de la base de données source

• Les tables à synchroniser doivent comporter des contraintes PRIMARY KEY ou UNIQUE avec tous les champs uniques. Sans ces contraintes, la base de données de destination peut contenir des enregistrements en double.

• Si votre base de données Oracle est en version 12c ou ultérieure, les noms de table ne peuvent pas dépasser 30 octets.

• Si vous sélectionnez des tables individuelles (et non une base de données entière) et que vous devez renommer des tables ou des colonnes dans la destination : une seule tâche prend en charge jusqu'à 1 000 tables. Pour plus de 1 000 tables, configurez plusieurs tâches par lots ou synchronisez plutôt la base de données entière.

• Si la base de données source est une base de données Oracle Real Application Cluster (RAC) connectée via Express Connect, vous devez spécifier une adresse IP virtuelle (VIP) pour la base de données lors de la configuration de la tâche de synchronisation des données.

• Si la base de données Oracle auto-gérée est une base de données Oracle RAC, vous ne pouvez utiliser qu'une VIP plutôt qu'une adresse IP Single Client Access Name (SCAN) lors de la configuration de la tâche de synchronisation des données. Après avoir spécifié la VIP, le basculement de nœud de la base de données Oracle RAC n'est pas pris en charge.

• Si un basculement primaire/secondaire se produit sur la base de données source pendant l'exécution de la tâche, celle-ci échoue.

• La tâche échoue si la source contient des chaînes vides de type VARCHAR2 et que la colonne de destination correspondante possède une contrainte NOT NULL. Oracle traite les chaînes VARCHAR2 vides comme des valeurs nulles.

Limites de la destination et limites générales

• Les noms de table PolarDB for MySQL ne sont pas sensibles à la casse. Si un nom de table Oracle source contient des lettres majuscules, PolarDB for MySQL les convertit en minuscules avant de créer la table.

  Si la base de données Oracle source contient des noms de table qui ne diffèrent que par la casse, des incohérences de données ou un échec de la tâche peuvent survenir. Utilisez la fonctionnalité mappage des noms d'objets pour renommer les objets conflictuels lors de la configuration de la tâche.

• Évaluez l'impact sur les performances des bases de données source et de destination avant la synchronisation. Exécutez la tâche pendant les heures creuses lorsque cela est possible.

• Pendant la synchronisation complète des données, les opérations INSERT simultanées provoquent une fragmentation des tables dans la destination. Une fois la synchronisation complète terminée, l'espace de table de destination est plus grand que celui de la source.

• DTS calcule la latence de synchronisation en fonction de l'horodatage du dernier enregistrement synchronisé dans la destination par rapport à l'horodatage actuel de la source. Si aucune opération DML n'est exécutée sur la source pendant une période prolongée, l'affichage de la latence peut être inexact. Exécutez une opération DML sur la source pour actualiser la latence. Si vous synchronisez une base de données entière, créez une table heartbeat : DTS la met à jour chaque seconde pour maintenir la précision de la latence.

• Écrivez les données dans la base de données de destination uniquement via DTS pendant la synchronisation. L'écriture depuis d'autres sources provoque des incohérences de données.

• Si l'exécution d'instructions DDL échoue dans la base de données de destination, la tâche continue de s'exécuter. Consultez les instructions DDL ayant échoué dans les journaux de la tâche. Voir la rubrique Afficher les journaux de tâche.

• Les jeux de caractères des bases de données source et de destination doivent être compatibles. Des jeux de caractères incompatibles peuvent provoquer des incohérences de données ou l'échec de la tâche.

• Utilisez la fonctionnalité de migration de schéma de DTS. Sinon, la tâche de synchronisation peut échouer en raison de types de données incompatibles.

• Les fuseaux horaires des bases de données source et de destination doivent correspondre.

Étape 1 : Ouvrir la page des tâches de synchronisation des données

1. Connectez-vous à la console Data Management (DMS).

2. Dans la barre de navigation supérieure, cliquez sur Data + AI.

3. Dans le volet de navigation de gauche, choisissez DTS (DTS) > Data Synchronization.

   Le chemin de navigation peut varier selon le mode de la console DMS. Consultez les rubriques Simple mode et Customize the layout and style of the DMS console . Vous pouvez également accéder directement à la page des tâches de synchronisation des données dans la nouvelle console DTS.

4. Sur le côté droit de la page, sélectionnez la région où réside l'instance de synchronisation des données.

   Dans la nouvelle console DTS, sélectionnez la région dans la barre de navigation supérieure.

Étape 2 : Configurer les bases de données source et de destination

Cliquez sur Create Task. Dans l'assistant de création de tâche de synchronisation des données, configurez les paramètres suivants.

Nom de la tâche

Base de données source

Base de données de destination

Étape 3 : Tester la connectivité

Cliquez sur Test Connectivity and Proceed.

Si la base de données source ou de destination est une instance de base de données Alibaba Cloud, telle qu'une instance ApsaraDB RDS for MySQL ou ApsaraDB for MongoDB, DTS ajoute automatiquement les blocs CIDR des serveurs DTS à la liste d'autorisation de l'instance. Si la base de données source ou de destination est une base de données auto-gérée hébergée sur une instance Elastic Compute Service (ECS), DTS ajoute automatiquement les blocs CIDR des serveurs DTS aux règles du groupe de sécurité de l'instance ECS, et vous devez vous assurer que l'instance ECS peut accéder à la base de données. Pour les bases de données situées dans des centres de données ou provenant de fournisseurs de cloud tiers, ajoutez manuellement les blocs CIDR DTS à la liste d'autorisation de la base de données. Consultez la rubrique Add the CIDR blocks of DTS servers.

Étape 4 : Sélectionner les objets et configurer les paramètres de synchronisation

Configurez les paramètres de synchronisation suivants.

Paramètres de synchronisation

Paramètre	Description
Synchronization Types	Incremental Data Synchronization est sélectionné par défaut. Sélectionnez également Schema Synchronization et Full Data Synchronization. Une fois la pré-vérification terminée, DTS synchronise les données historiques de la source vers la destination comme base pour la synchronisation incrémentielle suivante.
Processing Mode of Conflicting Tables	Precheck and Report Errors : DTS vérifie la présence de tables portant des noms identiques dans la source et la destination. Si des noms identiques existent, la pré-vérification échoue et la tâche ne peut pas démarrer. Si les tables de la destination ne peuvent pas être supprimées ou renommées, utilisez la fonctionnalité object name mapping pour renommer les objets avant de commencer. Ignore Errors and Proceed : DTS ignore la pré-vérification des noms identiques. Lors de la synchronisation complète, les enregistrements de destination existants ayant la même clé primaire ou clé unique sont conservés. Lors de la synchronisation incrémentielle, ils sont écrasés. Si les schémas diffèrent, la synchronisation peut être partielle ou la tâche peut échouer.
Capitalization of object names in destination instance	Contrôle la casse des noms de base de données, de tables et de colonnes dans la destination. La valeur par défaut est DTS default policy. Consultez la rubrique Specify the capitalization of object names in the destination instance.
Source Objects	Sélectionnez des bases de données, des tables ou des colonnes dans Source Objects et cliquez sur pour les déplacer vers Selected Objects.
Selected Objects	Si le compte de base de données de destination n'est pas un compte privilégié, ou si le nom du schéma source n'est pas conforme aux conventions de dénomination de PolarDB for MySQL, faites un clic droit sur le schéma dans Selected Objects et définissez Schema Name sur le nom de la base de données cible. Pour renommer une table après la synchronisation, faites un clic droit sur la table et spécifiez le nouveau nom. Consultez la rubrique Mapper les noms d'objets. Pour filtrer les lignes, faites un clic droit sur une table et spécifiez les conditions de filtre. Consultez la rubrique Définir les conditions de filtre.

Si vous renommez un objet à l'aide du mappage des noms d'objets, les autres objets qui en dépendent peuvent ne pas être synchronisés correctement.

Étape 5 : Configurer les paramètres avancés

Cliquez sur Next: Advanced Settings et configurez les éléments suivants.

Vérification des données

Pour la configuration de la vérification des données, consultez la rubrique Configure data verification.

Paramètres avancés

Étape 6 : Enregistrer les paramètres et exécuter la pré-vérification

Cliquez sur Next: Save Task Settings and Precheck.

Pour afficher un aperçu des paramètres API pour cette configuration de tâche, survolez Next: Save Task Settings and Precheck et cliquez sur Preview OpenAPI parameters .

DTS exécute une pré-vérification avant que la tâche ne puisse démarrer. Si la pré-vérification échoue :

• Cliquez sur View Details à côté de chaque élément ayant échoué, résolvez le problème, puis relancez la pré-vérification.

• Pour les éléments d'alerte : si l'élément ne peut pas être ignoré, résolvez-le et relancez la pré-vérification. Si l'élément peut être ignoré, cliquez sur Confirm Alert Details > Ignore > OK > Precheck Again. Ignorer une alerte peut entraîner des incohérences de données.

Étape 7 : Acheter l'instance de synchronisation

Attendez que le Success Rate atteigne 100 %, puis cliquez sur Next: Purchase Instance.

Sur la page buy, configurez les éléments suivants.

Lisez et acceptez les Data Transmission Service (Pay-as-you-go) Service Terms, puis cliquez sur Buy and Start. Dans la boîte de dialogue de confirmation, cliquez sur OK.

La tâche apparaît dans la liste des tâches. Surveillez sa progression à cet endroit.