Data Transmission Service:Synchroniser des données d'une base de données Oracle auto-gérée vers DataHub

Prérequis

• Vous avez créé une base de données Oracle auto-gérée source et un projet DataHub de destination. La base de données Oracle auto-gérée doit être en version 19c, 18c, 12c, 11g, 10g ou 9i.

• La base de données Oracle auto-gérée fonctionne en mode ARCHIVELOG. Ses journaux archivés disposent d'une période de rétention adéquate et restent accessibles. Pour plus d'informations, consultez ARCHIVELOG.

• La journalisation supplémentaire est activée, y compris supplemental_log_data_pk et supplemental_log_data_ui. Pour plus d'informations, consultez Supplemental Logging.

• Le service DataHub est activé et un projet a été créé pour recevoir les données synchronisées. Pour plus d'informations, consultez Premiers pas avec DataHub et Gérer les projets.

• Avant de synchroniser une base de données Oracle source, prenez connaissance des capacités et des limites de Data Transmission Service (DTS). Utilisez également Advanced Database & Application Migration (ADAM) pour évaluer votre base de données afin de garantir une migration fluide vers le cloud. Pour plus d'informations, consultez Limites et préparation pour les bases de données Oracle et Vue d'ensemble de l'évaluation de base de données.

Précautions

Facturation

Topologies de synchronisation prises en charge

• Synchronisation unidirectionnelle un-à-un.

• Synchronisation unidirectionnelle un-à-plusieurs.

• Synchronisation unidirectionnelle plusieurs-à-un.

• Synchronisation unidirectionnelle en cascade.

Pour plus d'informations sur les topologies de synchronisation prises en charge et leurs limites, consultez Topologies de synchronisation.

Opérations SQL prises en charge pour la synchronisation

Permissions requises pour le compte de base de données

Procédure

1. Accédez à la page Data Synchronization Tasks.

   1. Connectez-vous à la console Data Management (DMS).

   2. Dans la barre de navigation supérieure, cliquez sur Data + AI.

   3. Dans le volet de navigation de gauche, choisissez DTS (DTS) > Data Synchronization.

   Remarque

   • Les opérations peuvent varier selon le mode et la disposition de la console DMS. Pour plus d'informations, consultez Console en mode simple et Personnaliser la disposition et le style de la console DMS.

   • Vous pouvez également accéder à la page Data Synchronization Tasks de la nouvelle console DTS.

2. Cliquez sur Create Task et configurez les bases de données source et de destination.

   Catégorie	Configuration	Description
   N/A	Task Name	DTS génère automatiquement un nom de tâche. Nous vous recommandons de spécifier un nom descriptif pour faciliter l'identification. Ce nom n'a pas besoin d'être unique.
   Source Database	Database Type	Sélectionnez Oracle.
   	Connection Type	Choisissez un type de connexion en fonction de l'emplacement de déploiement de la base de données source. Cette rubrique utilise Self-managed Database on ECS comme exemple. Remarque Si l'instance source est une base de données auto-gérée, vous devez également effectuer des travaux préparatoires. Pour plus d'informations, consultez Vue d'ensemble de la préparation.
   	Instance Region	Sélectionnez la région où réside la base de données Oracle auto-gérée.
   	ECS Instance ID	Sélectionnez l'ID de l'instance ECS hébergeant la base de données Oracle auto-gérée.
   	Port	Saisissez le port de service de la base de données Oracle auto-gérée. La valeur par défaut est 1521.
   	Oracle Type	Cet exemple utilise RAC or PDB Instance. Non-RAC Instance : si vous choisissez cette option, vous devez également saisir le SID. RAC or PDB Instance : si vous choisissez cette option, vous devez également saisir le ServiceName.
   	Database Account	Saisissez le compte de base de données de l'instance Oracle auto-gérée source.
   	Database Password	Saisissez le mot de passe correspondant au compte de base de données.
   Destination Database	Database Type	Sélectionnez DataHub.
   	Connection Type	Sélectionnez Cloud Instance.
   	Instance Region	Sélectionnez la région où réside l'instance DataHub de destination.
   	Project	Sélectionnez le Project de l'instance DataHub.

3. En bas de page, cliquez sur Test Connectivity and Proceed.

   Si la base de données source ou de destination est une instance de base de données Alibaba Cloud, telle qu'une instance ApsaraDB RDS for MySQL ou ApsaraDB for MongoDB, DTS ajoute automatiquement les blocs CIDR des serveurs DTS à la liste d'autorisation de l'instance. Si la base de données source ou de destination est une base de données auto-gérée hébergée sur une instance Elastic Compute Service (ECS), DTS ajoute automatiquement les blocs CIDR des serveurs DTS aux règles du groupe de sécurité de l'instance ECS, et vous devez vous assurer que l'instance ECS peut accéder à la base de données. Si la base de données source ou de destination est une base de données auto-gérée déployée dans un centre de données ou fournie par un fournisseur de services cloud tiers, vous devez ajouter manuellement les blocs CIDR des serveurs DTS à la liste d'autorisation de la base de données pour permettre à DTS d'y accéder. Pour plus d'informations, consultez Ajouter les adresses IP des serveurs DTS à la liste d'autorisation.

   Avertissement

   L'ajout automatique ou manuel des blocs CIDR des serveurs DTS à la liste d'autorisation de la base de données ou de l'instance, ou aux règles du groupe de sécurité ECS, peut présenter des risques de sécurité. Par conséquent, avant d'utiliser DTS pour synchroniser des données, vous devez comprendre et accepter les risques potentiels et prendre des mesures préventives, notamment : renforcer la sécurité de votre nom d'utilisateur et de votre mot de passe, limiter les ports exposés, authentifier les appels API, vérifier régulièrement la liste d'autorisation ou les règles du groupe de sécurité ECS et interdire les blocs CIDR non autorisés, ou connecter la base de données à DTS via Express Connect, VPN Gateway ou Smart Access Gateway.

4. Configurez les objets de la tâche et les paramètres avancés.

   Configuration	Description
   Synchronization Types	Incremental Synchronization est sélectionné par défaut. Vous devez également sélectionner Schema Synchronization. Une fois la pré-vérification terminée, DTS initialise le cluster de destination avec les données complètes des objets de synchronisation provenant de l'instance source. Ces données servent de base pour la synchronisation incrémentielle ultérieure.
   Additional column rules	Lorsque DTS synchronise des données vers DataHub, il ajoute des colonnes supplémentaires au topic de destination. Si les noms de ces colonnes supplémentaires correspondent à ceux de colonnes existantes dans le topic de destination, la tâche de synchronisation échoue. Définissez la Additional Column Rule sur New Rule ou Previous Rule selon vos besoins. Avertissement Avant de choisir une règle de colonne supplémentaire, vérifiez si les noms des colonnes supplémentaires entrent en conflit avec les colonnes existantes du topic de destination. Sinon, la tâche risque d'échouer ou des données pourraient être perdues. Pour plus d'informations sur les règles et définitions des colonnes supplémentaires, consultez Noms et définitions des colonnes supplémentaires.
   Processing Mode for Existing Tables in Destination	Precheck and Report Errors : vérifie si une table portant le même nom existe dans la base de données de destination. Si aucune table homonyme n'existe, la pré-vérification réussit. Si une table homonyme existe, la pré-vérification échoue et la tâche de synchronisation ne démarre pas. Remarque Si vous ne pouvez ni supprimer ni renommer la table homonyme dans la base de données de destination, vous pouvez la mapper vers un nom de table différent. Pour plus d'informations, consultez Mapper les noms de tables et de colonnes. Ignore Errors and Proceed : ignore la vérification des noms de tables en double dans la base de données de destination. Avertissement La sélection de Ignore Errors and Proceed peut entraîner une incohérence des données et mettre votre activité en péril. Par exemple : Si les schémas de table sont identiques et qu'un enregistrement de la base de données de destination possède la même valeur de clé primaire ou unique qu'un enregistrement de la base de données source : Lors de la synchronisation complète, DTS conserve l'enregistrement dans le cluster de destination. L'enregistrement correspondant de la base de données source n'est pas synchronisé. Lors de la synchronisation incrémentielle, l'enregistrement de la base de données source écrase celui de la base de données de destination. Si les schémas de table diffèrent, la synchronisation initiale des données peut échouer. Cela peut aboutir à la synchronisation partielle des données de colonnes ou à un échec complet de la synchronisation. Procédez avec prudence.
   Case Sensitivity Policy for Destination Object Names	Vous pouvez configurer la politique de sensibilité à la casse pour les noms d'objets de base de données, de tables et de colonnes synchronisés vers l'instance de destination. Par défaut, la DTS default policy est sélectionnée. Vous pouvez également choisir d'utiliser les politiques par défaut des bases de données source et de destination. Pour plus d'informations, consultez Politique de sensibilité à la casse pour les noms d'objets de destination.
   Source Objects	Dans la zone Source Objects, cliquez sur un objet à synchroniser, puis cliquez sur pour le déplacer vers la zone Selected Objects. Remarque Vous pouvez sélectionner des tables comme objets à synchroniser.
   Selected Objects	Pour renommer un seul objet de synchronisation dans l'instance de destination, faites un clic droit sur l'objet dans la zone Selected Objects. Pour plus d'informations sur le renommage d'objets, consultez Mapper une base de données, une table ou une colonne unique. Pour modifier par lot les noms de plusieurs objets de synchronisation dans l'instance de destination, cliquez sur Batch Edit dans le coin supérieur droit de la zone Selected Objects. Pour plus d'informations, consultez Mapper des bases de données, tables et colonnes par lot. Remarque Si vous sélectionnez une base de données entière comme objet de synchronisation, vous ne pouvez pas définir de conditions de filtre. Si vous sélectionnez des tables comme objets de synchronisation et que vous devez définir une clause WHERE pour filtrer les données, vous pouvez faire un clic droit sur la table dans la zone Selected Objects et définir la condition de filtre dans la boîte de dialogue qui s'affiche. Pour plus d'informations, consultez Définir des conditions de filtre. Si vous sélectionnez des tables comme objets de synchronisation, vous pouvez faire un clic droit sur une table dans la zone Selected Objects, décocher la case Sync All Columns dans la boîte de dialogue qui s'affiche, puis définir la Shardkey, qui correspond à la clé utilisée pour le partitionnement. Le mappage de noms de base de données n'est pas pris en charge. Si vous utilisez la fonctionnalité de mappage de noms d'objets pour renommer une table ou une colonne, d'autres objets dépendant de cet objet pourraient ne pas être synchronisés correctement.

5. Cliquez sur Next: Advanced Settings pour configurer les paramètres avancés.

   Configuration	Description
   Dedicated Cluster for Task Scheduling	Par défaut, DTS planifie les tâches sur un cluster partagé, et vous n'avez pas besoin de sélectionner de cluster. Pour des performances plus stables, vous pouvez acheter un cluster dédié afin d'exécuter des tâches de synchronisation DTS. Pour plus d'informations, consultez Qu'est-ce qu'un cluster dédié DTS ?.
   Retry Time for Failed Connections	Après le démarrage d'une tâche de synchronisation, si la connexion à la base de données source ou de destination échoue, DTS signale une erreur et tente immédiatement de rétablir la connexion. La durée de nouvelle tentative par défaut est de 720 minutes. Vous pouvez également spécifier une durée personnalisée comprise entre 10 et 1 440 minutes. Nous vous recommandons de définir une durée d'au moins 30 minutes. Si DTS parvient à se reconnecter à la base de données dans le délai imparti, la tâche de synchronisation reprend automatiquement. Dans le cas contraire, la tâche échoue. Remarque Si vous possédez plusieurs instances DTS (par exemple, Instance A et Instance B) partageant la même source ou destination, et que vous définissez le temps de nouvelle tentative réseau sur 30 minutes pour l'Instance A et 60 minutes pour l'Instance B, la durée la plus courte de 30 minutes s'applique aux deux. Étant donné que DTS facture le temps d'exécution de la tâche pendant la période de nouvelle tentative de connexion, nous vous recommandons de personnaliser la durée de nouvelle tentative en fonction de vos besoins métier ou de libérer l'instance DTS dès que possible après la libération des instances de base de données source et de destination.
   Retry Time for Other Issues	Après le démarrage de la tâche de synchronisation, si d'autres problèmes non liés à la connectivité surviennent avec la base de données source ou de destination (tels que des exceptions d'exécution DDL ou DML), DTS signale une erreur et lance immédiatement des opérations de nouvelle tentative continues. La durée de nouvelle tentative par défaut est de 10 minutes. Vous pouvez également personnaliser cette durée dans une plage de 1 à 1 440 minutes. Nous vous recommandons de la définir sur 10 minutes ou plus. Si les opérations concernées réussissent dans le délai de nouvelle tentative défini, la tâche de synchronisation reprend automatiquement. Sinon, la tâche échoue. Important La valeur de Retry Time for Other Issues doit être inférieure à celle de Retry Time for Failed Connections.
   Enable Throttling for Full Data Synchronization	Pendant la phase de synchronisation complète, DTS consomme des ressources de lecture et d'écriture des bases de données source et de destination, ce qui peut augmenter leur charge. Pour réduire la charge sur les bases de données source et de destination, vous pouvez définir une limite de débit pour la tâche de synchronisation complète en configurant les paramètres Queries per second (QPS) to the source database, RPS of Full Data Migration et Data migration speed for full migration (MB/s). Remarque Cet élément de configuration n'est disponible que lorsque Synchronization Types est défini sur Full Data Synchronization. Vous pouvez également ajuster le débit de synchronisation complète après le démarrage de l'instance de synchronisation.
   Enable Throttling for Incremental Data Synchronization	Vous pouvez également définir une limite de débit pour la tâche de synchronisation incrémentielle. Pour alléger la pression sur la base de données de destination, définissez les paramètres RPS of Incremental Data Synchronization et Data synchronization speed for incremental synchronization (MB/s).
   Environment Tag	Vous pouvez sélectionner un tag d'environnement pour identifier l'instance selon vos besoins. Aucune sélection n'est requise pour cet exemple.
   Actual Write Code	Vous pouvez sélectionner le type d'encodage pour l'écriture des données vers la destination selon vos besoins.
   Configure ETL	Choisissez d'activer ou non la fonctionnalité d'extraction, transformation et chargement (ETL). Pour plus d'informations, consultez Qu'est-ce que l'ETL ? Valeurs valides : Yes : active la fonctionnalité ETL. Saisissez les instructions de traitement des données dans l'éditeur de code. Pour plus d'informations, consultez Configurer l'ETL dans une tâche de migration ou de synchronisation de données. No : désactive la fonctionnalité ETL.
   Monitoring and Alerting	Spécifiez si vous souhaitez configurer des alertes. Si la synchronisation échoue ou si la latence dépasse le seuil spécifié, une notification est envoyée à un contact d'alerte. No : aucune alerte n'est configurée. Yes : configurez les alertes en définissant un seuil d'alerte et en spécifiant un notification d'alerte. Pour plus d'informations, consultez Configurer la surveillance et les alertes lors de la configuration de la tâche.

6. Enregistrez la tâche et lancez une pré-vérification.

   • Pour afficher les paramètres API permettant de configurer cette instance, passez la souris sur le bouton Next: Save Task Settings and Precheck et cliquez sur Preview OpenAPI parameters dans l'infobulle.

   • Une fois la consultation des paramètres API terminée, cliquez sur Next: Save Task Settings and Precheck en bas de la page.

   Remarque

   • Avant le démarrage de la tâche de synchronisation, DTS exécute une pré-vérification. La tâche ne peut démarrer que si tous les éléments de la pré-vérification réussissent.

   • Si la pré-vérification échoue, cliquez sur View Details pour l'élément ayant échoué. Corrigez le problème conformément aux instructions, puis relancez la pré-vérification.

   • Si la pré-vérification retourne un avertissement :

     • Si un élément de vérification échoue et ne peut pas être ignoré, cliquez sur View Details en regard de l'élément. Suivez les instructions pour corriger le problème, puis relancez la pré-vérification.

     • Pour les éléments de vérification pouvant être ignorés, cliquez successivement sur Confirm Alert Details, Ignore, OK et Precheck Again pour ignorer l'avertissement et relancer la pré-vérification. Si vous choisissez de masquer l'élément d'avertissement, cela peut entraîner des problèmes tels qu'une incohérence des données et présenter des risques pour votre activité.

7. Lorsque le Success Rate atteint 100 %, cliquez sur Next: Purchase Instance.

8. Sur la page Purchase, sélectionnez la méthode de facturation et la spécification de lien pour l'instance de synchronisation de données. Le tableau suivant décrit ces paramètres en détail.

   Catégorie	Paramètre	Description
   New Instance Class	Billing Method	Subscription : vous payez lors de la création de l'instance. Cette option convient aux besoins à long terme et s'avère plus économique que le paiement à l'utilisation. Plus la durée d'abonnement est longue, plus la remise est importante. Paiement à l'utilisation : la facturation s'effectue à l'heure. Cette option convient aux besoins à court terme. Vous pouvez libérer l'instance immédiatement après utilisation pour réaliser des économies.
   	Resource Group Configuration	Le groupe de ressources auquel appartient l'instance. La valeur par défaut est default resource group. Pour plus d'informations, consultez Qu'est-ce que Resource Management ?.
   	Link Specification	DTS propose des spécifications de synchronisation avec différents niveaux de performance. La spécification du lien de synchronisation influence le débit de synchronisation. Choisissez une spécification adaptée à votre scénario métier. Pour plus d'informations, consultez Spécifications des liens de synchronisation de données.
   	Subscription Duration	En mode abonnement, sélectionnez la durée et la quantité pour l'instance d'abonnement. Vous pouvez opter pour un abonnement mensuel de 1 à 9 mois, ou un abonnement annuel de 1, 2, 3 ou 5 ans. Remarque Cette option n'est disponible que lorsque la méthode de facturation est Subscription.

9. Une fois la configuration terminée, lisez et acceptez les Data Transmission Service (Pay-as-you-go) Service Terms.

10. Cliquez sur Buy and Start. Dans la boîte de dialogue OK, cliquez sur OK.

    Vous pouvez suivre la progression de la tâche sur la page Data Synchronization.