Data Transmission Service:Synchroniser des données d'une base de données Oracle gérée en interne vers un projet MaxCompute

Exigences relatives à la base de données source

• Les tables doivent disposer d'une clé primaire ou d'une clé unique, tous les champs devant être uniques. Sans cela, des lignes en double peuvent apparaître dans la destination.

• Pour Oracle 12c et versions ultérieures, les noms de table ne doivent pas dépasser 30 octets.

• Si vous renommez des tables ou des colonnes au niveau de la destination (dans Selected Objects > clic droit), une tâche unique prend en charge jusqu'à 1,000 tables. Pour des charges de travail plus importantes, répartissez les tables sur plusieurs tâches ou synchronisez l'intégralité de la base de données sans renommage.

• Pour Oracle Real Application Cluster (RAC), utilisez une adresse IP virtuelle (VIP) plutôt qu'une adresse IP Single Client Access Name (SCAN). Une fois la VIP spécifiée, le basculement de nœud n'est pas pris en charge.

• Si la base de données Oracle RAC se connecte via Express Connect, spécifiez une VIP lors de la configuration de la tâche.

Exigences de rétention des journaux

Les journaux redo et archivés doivent respecter les périodes de rétention minimales suivantes :

Si les journaux sont purgés avant que DTS ne puisse les lire, la tâche échoue. Dans certains cas limites, cela peut entraîner une incohérence ou une perte de données. Une fois la synchronisation complète des données terminée, vous pouvez réduire la période de rétention à 24 heures.

Autres limitations

• N'effectuez pas de basculement primaire/secondaire pendant l'exécution de la tâche, sous peine d'échec.

• Les chaînes VARCHAR2 vides (traitées comme NULL par Oracle) provoquent des échecs si la colonne de destination correspondante possède une contrainte NOT NULL.

• Tables avec la stratégie Fine-Grained Audit (FGA) activée : DTS ne peut pas lire la pseudocolonne ORA_ROWSCN et la tâche échoue. Désactivez la stratégie FGA sur les tables concernées ou excluez-les de la synchronisation.

• Ne mettez pas à jour les champs LONGTEXT pendant l'exécution de la synchronisation.

• N'exécutez pas d'opérations DDL pendant la synchronisation du schéma ou la synchronisation initiale complète des données.

• N'utilisez pas Oracle Data Pump pour écrire dans la base de données source pendant la synchronisation incrémentielle des données, car cela pourrait entraîner une perte de données.

• Les tables externes ne peuvent pas être synchronisées.

• MaxCompute ne prend pas en charge les contraintes de clé primaire. En cas d'erreurs réseau durant la synchronisation, DTS risque d'écrire des lignes en double dans MaxCompute.

• Écrivez dans le projet MaxCompute de destination uniquement via DTS afin d'éviter toute incohérence des données.

• Si DTS doit récupérer une instance ayant échoué, le processus peut prendre jusqu'à 8 heures et impliquer le redémarrage de l'instance ou l'ajustement des paramètres de l'instance DTS (les paramètres de la base de données ne sont pas modifiés). Pour connaître les paramètres susceptibles d'être modifiés, consultez la rubrique Modifier les paramètres de l'instance.

Considérations relatives aux performances

• Synchronisez les données pendant les heures creuses. La synchronisation complète des données consomme des ressources de lecture et d'écriture sur les bases de données source et de destination.

• Après la synchronisation complète des données, l'espace de table de destination peut être plus volumineux que celui de la source en raison de la fragmentation causée par les opérations INSERT concurrentes.

• La latence de synchronisation est calculée à partir de l'horodatage du dernier enregistrement synchronisé dans la destination par rapport à l'horodatage actuel dans la source. Si aucune opération DML n'est exécutée sur la source pendant une période prolongée, la lecture de la latence peut être imprécise. Exécutez une opération DML sur la source pour l'actualiser, ou activez une table de pulsation si vous synchronisez une base de données entière.

Étape 1 : Accéder à la page Data Synchronization

Utilisez l'une des consoles suivantes pour démarrer :

Étape 2 : Configurer les bases de données source et de destination

Cliquez sur Create Task pour ouvrir la page de configuration de la tâche. Configurez les paramètres comme suit :

Étape 3 : Tester la connectivité

En bas de la page, cliquez sur Test Connectivity and Proceed. Dans la boîte de dialogue CIDR Blocks of DTS Servers, cliquez sur Test Connectivity.

Cliquez sur OK pour accorder des autorisations à votre compte MaxCompute, puis cliquez sur Test Connectivity and Proceed.

Étape 4 : Configurer les objets à synchroniser

À l'étape Configure Objects, définissez les paramètres suivants :

Paramètre	Description
Synchronization Types	L'option Incremental Data Synchronization est sélectionnée par défaut. Sélectionnez également Schema Synchronization et Full Data Synchronization pour exécuter les trois phases.
Naming Rules of Additional Columns	DTS ajoute des colonnes supplémentaires aux tables de destination. Si le nom d'une colonne supplémentaire entre en conflit avec une colonne existante, la tâche échoue et des données peuvent être perdues. Sélectionnez New Rule ou Previous Rule selon vos besoins. Vérifiez l'absence de conflits de nommage avant de définir ce paramètre. Consultez la rubrique Règles de nommage des colonnes supplémentaires.
Partition Definition of Incremental Data Table	Sélectionnez les noms de partition selon vos besoins. Consultez la rubrique Partition.
Processing Mode of Conflicting Tables	Precheck and Report Errors (par défaut) : vérifie la présence de noms de table identiques dans la source et la destination. La prévérification échoue en cas de conflits. Pour résoudre les conflits, utilisez la fonctionnalité de mappage de noms d'objets pour renommer les tables de destination. Consultez la rubrique Mapper les noms d'objets. Ignore Errors and Proceed : ignore la vérification des conflits. Lors de la synchronisation complète, les enregistrements de destination existants sont conservés ; lors de la synchronisation incrémentielle, les enregistrements existants sont écrasés. Si les schémas diffèrent, l'initialisation peut échouer ou seules certaines colonnes peuvent être synchronisées.
Capitalization of Object Names in Destination Instance	Contrôle la casse des noms de bases de données, de tables et de colonnes dans la destination. Par défaut : DTS default policy. Consultez la rubrique Spécifier la casse des noms d'objets dans l'instance de destination.
Source Objects	Sélectionnez une ou plusieurs tables et cliquez sur pour les ajouter à Selected Objects. Seules les tables peuvent être synchronisées.
Selected Objects	Pour renommer un seul objet : faites un clic droit dessus et spécifiez un nouveau nom. Consultez la rubrique Mapper le nom d'un seul objet. Pour renommer plusieurs objets : cliquez sur Batch Edit. Consultez la rubrique Mapper plusieurs noms d'objets simultanément. Pour filtrer les lignes : faites un clic droit sur la table et définissez les conditions de filtrage. Consultez la rubrique Spécifier les conditions de filtrage. Le renommage d'un objet peut empêcher la synchronisation d'autres objets qui en dépendent.

Étape 5 : Configurer les paramètres avancés

Cliquez sur Next: Advanced Settings et configurez les éléments suivants :

Étape 6 : Exécuter la prévérification

Cliquez sur Next: Save Task Settings and Precheck.

DTS exécute une prévérification avant le démarrage de la tâche. Si la prévérification échoue :

• Cliquez sur View Details à côté de chaque élément ayant échoué, résolvez le problème, puis cliquez sur Precheck Again.

• Pour les éléments d'alerte pouvant être ignorés : cliquez sur Confirm Alert Details, puis sur Ignore dans la boîte de dialogue, puis sur OK, et enfin sur Precheck Again. Les alertes ignorées peuvent entraîner une incohérence des données.

Étape 7 : Acheter une instance de synchronisation de données

1. Attendez que le Success Rate atteigne 100%, puis cliquez sur Next: Purchase Instance.

2. Sur la page buy, configurez les éléments suivants :

   Section	Paramètre	Description
   New Instance Class	Méthode de facturation	Subscription : paiement anticipé pour une durée fixe — plus rentable pour une utilisation à long terme. Pay-as-you-go : facturation horaire — adapté à une utilisation à court terme. Libérez l'instance lorsqu'elle n'est plus nécessaire pour arrêter la facturation.
   	Paramètres du groupe de ressources	Groupe de ressources pour l'instance. Par défaut : default resource group. Consultez la rubrique Qu'est-ce que Resource Management ?
   	Instance Class	Classe de débit de synchronisation. Consultez la rubrique Classes d'instances des instances de synchronisation de données.
   	Durée de l'abonnement	Disponible pour la méthode de facturation Subscription. Options : 1 à 9 mois, 1 an, 2 ans, 3 ans ou 5 ans.

3. Lisez et acceptez les Data Transmission Service (Pay-as-you-go) Service Terms.

4. Cliquez sur Buy and Start, puis sur OK dans la boîte de dialogue de confirmation.

La tâche apparaît dans la liste des tâches. Suivez sa progression depuis cette liste.