Vous pouvez utiliser Data Transmission Service (DTS) pour synchroniser les données d'une base de données Db2 for LUW vers une instance ApsaraDB RDS for MySQL.
Prérequis
Vous avez créé une instance de destination ApsaraDB RDS for MySQL. Pour plus d'informations, consultez la rubrique Créer une instance ApsaraDB RDS for MySQL.
Si vous devez effectuer une synchronisation complète, l'espace de stockage de la base de données de destination doit être supérieur à l'espace occupé par la base de données source.
Limites
Type de limite | Description |
Limites liées à la base de données source |
|
Autres limites |
|
Cas particuliers | La base de données source Db2 for LUW est une base de données autogérée. Lorsque vous synchronisez des données depuis la base de données Db2 for LUW, tenez compte des points suivants :
|
Facturation
|
Type de synchronisation |
Frais |
|
Synchronisation complète des données |
Gratuit |
|
Synchronisation incrémentielle des données |
Facturé. Consultez la rubrique Présentation de la facturation. |
Topologies de synchronisation prises en charge
Synchronisation unidirectionnelle un-à-un
Synchronisation unidirectionnelle un-à-plusieurs
Synchronisation unidirectionnelle en cascade
Synchronisation unidirectionnelle plusieurs-à-un
Pour plus d'informations sur les topologies de synchronisation et leurs considérations, consultez la rubrique Topologies de synchronisation des données.
Opérations SQL prises en charge
|
Type d'opération |
Instruction SQL |
|
DML |
INSERT, UPDATE, DELETE |
Préparatifs
-
Créer des comptes et accorder des autorisations
Base de données
Autorisations requises
Références
Db2 for LUW
Autorisations DBADM
ApsaraDB RDS for MySQL
Autorisations de lecture et d'écriture sur les objets de synchronisation dans la base de données de destination
Activez la fonctionnalité d'archivage des journaux pour la base de données Db2 for LUW. Pour plus d'informations, consultez les pages logarchmeth1 - Paramètre de configuration de la méthode principale d'archivage des journaux et logarchmeth2 - Paramètre de configuration de la méthode secondaire d'archivage des journaux.
Procédure
-
Accédez à la page de liste des tâches de synchronisation de la région de destination. Vous pouvez utiliser l'une des deux méthodes suivantes :
Depuis la console DTS
Connectez-vous à la console Data Transmission Service (DTS).
Dans le volet de navigation de gauche, cliquez sur Data Synchronization.
Dans le coin supérieur gauche de la page, sélectionnez la région où se trouve l'instance de synchronisation.
Depuis la console DMS
RemarqueLes opérations réelles peuvent varier en fonction du mode et de la disposition de la console DMS. Pour plus d'informations, consultez les rubriques Mode simple et Personnaliser la disposition et le style de l'interface DMS.
Connectez-vous à Data Management (DMS).
Dans la barre de menu supérieure, choisissez .
À droite de Data Synchronization Tasks, sélectionnez la région où se trouve l'instance de synchronisation.
Cliquez sur Create Task pour ouvrir la page de configuration de la tâche.
-
Facultatif : Dans le coin supérieur droit de la page, cliquez sur New Configuration Page.
RemarqueSi le bouton dans le coin supérieur droit est Back to Previous Version, vous pouvez ignorer cette étape.
Les pages de configuration nouvelle et ancienne présentent des paramètres différents. Nous vous recommandons d'utiliser la nouvelle page de configuration.
-
Configurez les bases de données source et de destination.
Section
Paramètre
Description
N/A
Task Name
DTS génère automatiquement un nom de tâche. Nous vous recommandons de spécifier un nom descriptif pour une identification facile. Le nom n'a pas besoin d'être unique.
Source Database
Select Existing Connection
Pour utiliser une instance de base de données ajoutée au système (nouvellement créée ou enregistrée), sélectionnez l'instance de base de données dans la liste déroulante. Les informations de la base de données sont configurées automatiquement.
RemarqueDans la console DMS, cet élément de configuration est nommé Select a DMS database instance..
Si vous n'avez pas ajouté l'instance de base de données au système, ou si vous n'avez pas besoin d'utiliser une instance déjà ajoutée, configurez manuellement les informations de base de données suivantes.
Database Type
Sélectionnez DB2 for LUW.
Connection Type
Sélectionnez une valeur en fonction de l'emplacement de déploiement de la base de données source. Cette rubrique utilise Self-managed Database on ECS comme exemple.
RemarqueSi l'instance source est une base de données autogérée, vous devez également effectuer les préparations nécessaires. Pour plus d'informations, consultez la rubrique Préparatifs pour la connexion à une base de données autogérée.
Instance Region
Sélectionnez la région où se trouve la base de données Db2 for LUW.
Replicate Data Across Alibaba Cloud Accounts
Cet exemple utilise une instance de base de données appartenant au compte Alibaba Cloud actuel. Sélectionnez No.
ECS Instance ID
Saisissez l'ID de l'instance ECS qui héberge la base de données Db2 for LUW.
Port
Saisissez le port de service de la base de données Db2 for LUW. La valeur par défaut est 50000.
Database Name
Saisissez le nom de la base de données dans l'instance Db2 for LUW source qui contient les objets à synchroniser.
Database Account
Saisissez le compte de base de données pour la base de données Db2 for LUW. Pour les exigences en matière d'autorisations, consultez la rubrique Créer des comptes et accorder des autorisations.
Database Password
Saisissez le mot de passe correspondant au compte de base de données.
Destination Database
Select Existing Connection
Pour utiliser une instance de base de données ajoutée au système (nouvellement créée ou enregistrée), sélectionnez l'instance de base de données dans la liste déroulante. Les informations de la base de données sont configurées automatiquement.
RemarqueDans la console DMS, cet élément de configuration est nommé Select a DMS database instance..
Si vous n'avez pas ajouté l'instance de base de données au système, ou si vous n'avez pas besoin d'utiliser une instance déjà ajoutée, configurez manuellement les informations de base de données suivantes.
Database Type
Sélectionnez MySQL.
Connection Type
Sélectionnez Alibaba Cloud Instance.
Instance Region
Sélectionnez la région où se trouve l'instance ApsaraDB RDS for MySQL de destination.
Replicate Data Across Alibaba Cloud Accounts
Cet exemple utilise une instance de base de données appartenant au compte Alibaba Cloud actuel. Sélectionnez No.
RDS Instance ID
Sélectionnez l'ID de l'instance ApsaraDB RDS for MySQL de destination.
Database Account
Saisissez le compte de base de données pour l'instance ApsaraDB RDS for MySQL de destination. Pour les exigences en matière d'autorisations, consultez la rubrique Créer des comptes et accorder des autorisations.
Database Password
Saisissez le mot de passe correspondant au compte de base de données.
Connection Method
Sélectionnez Non-encrypted ou SSL-encrypted selon vos besoins. Si vous sélectionnez SSL-encrypted, vous devez activer le chiffrement SSL pour l'instance RDS for MySQL au préalable. Pour plus d'informations, consultez la rubrique Utiliser un certificat cloud pour activer rapidement le chiffrement SSL.
-
Une fois la configuration terminée, cliquez sur Test Connectivity and Proceed en bas de la page. Dans la boîte de dialogue CIDR Blocks of DTS Servers, cliquez sur Test Connectivity.
RemarqueAssurez-vous que les blocs CIDR d'adresses IP des serveurs DTS sont ajoutés aux paramètres de sécurité des bases de données source et de destination pour autoriser l'accès depuis les serveurs DTS. Cette opération peut être effectuée automatiquement ou manuellement. Pour plus d'informations, consultez la rubrique Ajouter les blocs CIDR d'adresses IP des serveurs DTS à une liste d'autorisation.
-
Configurez les objets de la tâche.
-
Sur la page Configure Objects, configurez les objets à synchroniser.
Paramètre
Description
Synchronization Types
Les types de synchronisation. Par défaut, l'option Incremental Data Synchronization est sélectionnée. Vous devez également sélectionner les options Schema Synchronization et Full Data Synchronization. Une fois la vérification préalable terminée, DTS synchronise les données historiques des objets sélectionnés depuis la base de données source vers le cluster de destination. Ces données historiques constituent la base de la synchronisation incrémentielle ultérieure.
Processing Mode of Conflicting Tables
Precheck and Report Errors : DTS vérifie la présence de tables portant le même nom dans la base de données de destination. En cas de conflit, DTS signale une erreur lors de la vérification préalable et n'exécute pas la tâche.
RemarqueS'il n'est pas possible de supprimer ou de renommer la table en conflit, vous pouvez mapper cette table vers un autre nom. Pour plus d'informations, consultez la rubrique Mapper les noms d'objets.
Ignore Errors and Proceed : Ignore la vérification des tables portant le même nom dans la base de données de destination.
AvertissementSi vous sélectionnez l'option Ignore Errors and Proceed, des incohérences de données peuvent survenir. Par exemple :
Si les schémas de table sont identiques, les enregistrements de destination ayant la même clé primaire ou unique que les enregistrements source sont écrasés.
Si les schémas de table diffèrent, la tâche peut échouer ou ne synchroniser que partiellement les données. Procédez avec prudence.
Source Objects
Dans la zone Source Objects, cliquez sur un objet à synchroniser, puis cliquez sur
pour le déplacer vers la zone Selected Objects.RemarqueVous pouvez sélectionner des bases de données, des tables et des colonnes comme objets de synchronisation. Si vous sélectionnez des tables ou des colonnes, les autres objets tels que les vues, les déclencheurs et les procédures stockées ne sont pas synchronisés vers la base de données de destination.
Selected Objects
Pour renommer un objet dans l'instance cible, effectuez un clic droit sur l'objet de synchronisation dans la zone Selected Objects. Pour obtenir des instructions de configuration, consultez la rubrique Mapper un seul nom de schéma, de table ou de colonne.
Pour renommer plusieurs objets dans l'instance cible simultanément, cliquez sur Selected Objects dans le coin supérieur droit de la zone Batch Edit. Pour obtenir des instructions de configuration, consultez la rubrique Mapper les noms de schéma, de table et de colonne par lots.
RemarquePour sélectionner les opérations SQL à synchroniser au niveau de la base de données ou de la table, effectuez un clic droit sur l'objet dans la zone Selected Objects et sélectionnez les opérations SQL souhaitées dans la boîte de dialogue.
Pour définir une clause WHERE afin de filtrer les données, effectuez un clic droit sur la table dans la zone Selected Objects et définissez la condition de filtre dans la boîte de dialogue. Pour obtenir des instructions, consultez la rubrique Définir des conditions de filtre.
-
Cliquez sur Next: Advanced Settings pour configurer les paramètres avancés.
Paramètre
Description
Dedicated Cluster for Task Scheduling
Par défaut, DTS planifie les tâches sur un cluster partagé et aucune sélection de cluster n'est requise. Pour obtenir des performances plus stables, vous pouvez acheter un cluster dédié pour exécuter les tâches de synchronisation DTS. Pour plus d'informations, consultez la rubrique Qu'est-ce qu'un cluster dédié DTS ?.
Retry Time for Failed Connections
Une fois la tâche de synchronisation démarrée, si la connexion à la base de données source ou de destination échoue, DTS signale une erreur et tente immédiatement de rétablir la connexion. La durée de nouvelle tentative par défaut est de 720 minutes. Vous pouvez également spécifier une durée personnalisée comprise entre 10 et 1 440 minutes. Nous vous recommandons de définir une durée d'au moins 30 minutes. Si DTS parvient à se reconnecter à la base de données dans le délai spécifié, la tâche de synchronisation reprend automatiquement. Dans le cas contraire, la tâche échoue.
RemarqueSi vous disposez de plusieurs instances DTS (par exemple, l'instance A et l'instance B) qui partagent la même source ou la même destination, et que vous définissez le délai de nouvelle tentative réseau sur 30 minutes pour l'instance A et sur 60 minutes pour l'instance B, la durée la plus courte, soit 30 minutes, s'applique aux deux instances.
Étant donné que DTS facture l'exécution de la tâche pendant la période de nouvelle tentative de connexion, nous vous recommandons de personnaliser la durée de nouvelle tentative en fonction de vos besoins métier ou de libérer l'instance DTS dès que possible après la libération des instances de base de données source et de destination.
Retry Time for Other Issues
Une fois la tâche de synchronisation démarrée, si d'autres problèmes non liés à la connectivité surviennent avec la base de données source ou de destination (tels que des exceptions d'exécution DDL ou DML), DTS signale une erreur et lance immédiatement des opérations de nouvelle tentative continues. La durée de nouvelle tentative par défaut est de 10 minutes. Vous pouvez également personnaliser la durée de nouvelle tentative dans la plage de 1 à 1 440 minutes. Nous vous recommandons de la définir sur 10 minutes ou plus. Si les opérations concernées aboutissent dans le délai de nouvelle tentative défini, la tâche de synchronisation reprend automatiquement. Dans le cas contraire, la tâche échoue.
ImportantLa valeur définie pour le paramètre Retry Time for Other Issues doit être inférieure à celle du paramètre Retry Time for Failed Connections.
Enable Throttling for Full Data Synchronization
Pendant l'étape de synchronisation complète, DTS consomme des ressources de lecture et d'écriture des bases de données source et de destination, ce qui peut augmenter la charge de la base de données. Pour réduire la charge sur les bases de données source et de destination, vous pouvez définir une limite de débit pour la tâche de synchronisation complète en configurant les paramètres Queries per second (QPS) to the source database, RPS of Full Data Migration et Data migration speed for full migration (MB/s).
RemarqueCet élément de configuration est disponible uniquement lorsque le paramètre Synchronization Types est défini sur Full Data Synchronization.
Vous pouvez également ajuster le débit de synchronisation complète une fois l'instance de synchronisation en cours d'exécution.
Enable Throttling for Incremental Data Synchronization
Vous pouvez également définir une limite de débit pour la tâche de synchronisation incrémentielle. Pour soulager la pression sur la base de données de destination, définissez les paramètres RPS of Incremental Data Synchronization et Data synchronization speed for incremental synchronization (MB/s).
Environment Tag
Vous pouvez sélectionner un tag d'environnement pour identifier l'instance. Cette opération n'est pas requise pour cet exemple.
Configure ETL
Choisissez d'activer ou non la fonctionnalité ETL (Extract, Transform, Load). Pour plus d'informations, consultez la rubrique Qu'est-ce que la fonctionnalité ETL ? Valeurs valides :
Yes : Active la fonctionnalité ETL. Saisissez les instructions de traitement des données dans l'éditeur de code. Pour plus d'informations, consultez la rubrique Configurer la fonctionnalité ETL dans une tâche de migration ou de synchronisation de données.
No : Désactive la fonctionnalité ETL.
Monitoring and Alerting
Indiquez si vous souhaitez configurer des alertes. En cas d'échec de la synchronisation ou si la latence dépasse le seuil spécifié, une notification est envoyée à un contact d'alerte.
No : Aucune alerte n'est configurée.
Yes : Configurez les alertes en définissant un seuil d'alerte et en spécifiant un message d'alerte. Pour plus d'informations, consultez la rubrique Configurer la surveillance et les alertes lors de la configuration de la tâche.
-
Cliquez sur Next: Data Validation pour configurer une tâche de validation des données.
Si vous souhaitez utiliser la fonctionnalité de validation des données, consultez la rubrique Configurer la validation des données pour obtenir des instructions de configuration.
-
-
Enregistrez la tâche et exécutez une vérification préalable.
Pour afficher les paramètres API de configuration de cette instance, placez le curseur sur le bouton Next: Save Task Settings and Precheck et cliquez sur Preview OpenAPI parameters dans la bulle d'aide.
Une fois que vous avez consulté les paramètres API, cliquez sur Next: Save Task Settings and Precheck en bas de la page.
RemarqueAvant le démarrage de la tâche de synchronisation, DTS exécute une vérification préalable. La tâche ne peut démarrer que si tous les éléments de vérification réussissent.
Si la vérification préalable échoue, cliquez sur View Details pour l'élément ayant échoué. Corrigez le problème selon les instructions, puis relancez la vérification préalable.
-
Si la vérification préalable renvoie un avertissement :
Si un élément de vérification échoue et ne peut pas être ignoré, cliquez sur View Details à côté de l'élément. Suivez les instructions pour corriger le problème, puis relancez la vérification préalable.
Pour les éléments de vérification pouvant être ignorés, vous pouvez cliquer successivement sur Confirm Alert Details, Ignore, OK et Precheck Again afin d'ignorer l'avertissement et de relancer la vérification préalable. Si vous choisissez de masquer l'élément d'avertissement, cela peut entraîner des problèmes tels que des incohérences de données et présenter des risques pour votre activité.
-
Achetez l'instance.
Lorsque le Success Rate atteint 100 %, cliquez sur Next: Purchase Instance.
-
Sur la page Purchase, sélectionnez la méthode de facturation et les spécifications de lien pour l'instance de synchronisation de données. Le tableau suivant décrit ces paramètres en détail.
Catégorie
Paramètre
Description
New Instance Class
Méthode de facturation
Abonnement : Vous payez lors de la création de l'instance. Cette option convient aux besoins à long terme et est plus rentable que le paiement à l'utilisation. Plus la durée d'abonnement est longue, plus la remise est importante.
Paiement à l'utilisation : Vous êtes facturé à l'heure. Cette option convient aux besoins à court terme. Vous pouvez libérer l'instance immédiatement après utilisation pour réaliser des économies.
Configuration du groupe de ressources
Le groupe de ressources auquel appartient l'instance. La valeur par défaut est « default resource group ». Pour plus d'informations, consultez la rubrique Qu'est-ce que Resource Management ?.
Spécifications de lien
DTS propose des spécifications de synchronisation avec différents niveaux de performance. Les spécifications de lien de synchronisation influent sur le débit de synchronisation. Vous pouvez choisir une spécification adaptée à votre scénario métier. Pour plus d'informations, consultez la rubrique Spécifications de lien de synchronisation de données.
Durée d'abonnement
En mode abonnement, sélectionnez la durée et la quantité pour l'instance d'abonnement. Vous pouvez choisir un abonnement mensuel de 1 à 9 mois, ou un abonnement annuel de 1, 2, 3 ou 5 ans.
RemarqueCette option est disponible uniquement lorsque la méthode de facturation est définie sur Subscription.
Une fois la configuration terminée, lisez et acceptez les Data Transmission Service (Pay-as-you-go) Service Terms.
-
Cliquez sur Buy and Start. Dans la boîte de dialogue OK, cliquez sur OK.
Vous pouvez consulter la progression de la tâche sur la page Data Synchronization.