PolarDB:Synchroniser des données d'un cluster PolarDB for MySQL vers une instance ApsaraDB RDS for MySQL

Bases de données de destination prises en charge

Vous pouvez synchroniser des données d'un cluster PolarDB for MySQL vers MySQL. Les types de bases de données de destination suivants sont pris en charge. Cette rubrique utilise une instance ApsaraDB RDS for MySQL comme exemple pour décrire la procédure de configuration. Les procédures de configuration pour les autres types de bases de données de destination sont similaires.

• Instance ApsaraDB RDS for MySQL

• Base de données auto-gérée hébergée sur Elastic Compute Service (ECS)

• Base de données auto-gérée connectée via Express Connect, VPN Gateway ou Smart Access Gateway

• Base de données auto-gérée connectée via Database Gateway

• Base de données auto-gérée connectée via Cloud Enterprise Network (CEN)

Prérequis

• Le cluster PolarDB for MySQL source est créé. Pour plus d'informations, consultez les rubriques Achat personnalisé et Acheter un cluster par abonnement.

  2070624_v1_3_4.dita" data-node="2755247">.

• L'instance ApsaraDB RDS for MySQL de destination, dont l'espace de stockage est supérieur à l'espace occupé par le cluster PolarDB for MySQL source, est créée. Pour savoir comment créer une instance, consultez la rubrique Créer une instance ApsaraDB RDS for MySQL.

  nce, see Create an ApsaraDB RDS for MySQL instance.

Précautions

Facturation

Architectures de synchronisation prises en charge

• Synchronisation unidirectionnelle un-vers-plusieurs

• Synchronisation en cascade unidirectionnelle

• Synchronisation en cascade bidirectionnelle

• Synchronisation unidirectionnelle plusieurs-vers-un

• Synchronisation bidirectionnelle un-vers-un

  Pour plus d'informations sur chaque architecture de synchronisation et les considérations associées, consultez la rubrique Topologies de synchronisation des données.

Opérations SQL prises en charge pour la synchronisation

Autorisations requises pour les comptes de base de données

Procédure

1. Accédez à la page de liste des tâches de synchronisation de la région de destination. Vous pouvez utiliser l'une des deux méthodes suivantes :

   Depuis la console DTS

   1. Connectez-vous à la console Data Transmission Service (DTS).

   2. Dans le volet de navigation de gauche, cliquez sur Data Synchronization.

   3. Dans le coin supérieur gauche de la page, sélectionnez la région où se trouve l'instance de synchronisation.

   Depuis la console DMS

   Remarque

   Les opérations réelles peuvent varier en fonction du mode et de la disposition de la console DMS. Pour plus d'informations, consultez Mode simple et Personnaliser la disposition et le style de l'interface DMS.

   1. Connectez-vous à Data Management (DMS).

   2. Dans la barre de menu supérieure, choisissez Data Synchronization > Data + AI > Data Transmission (DTS).

   3. À droite de Data Synchronization Tasks, sélectionnez la région où se trouve l'instance de synchronisation.

2. Cliquez sur Create Task pour ouvrir la page de configuration de la tâche.

3. Configurez les bases de données source et de destination.

   Avertissement

   Après avoir sélectionné les instances source et de destination, lisez attentivement les limites affichées en haut de la page. Le non-respect de ces limites peut entraîner l'échec de la tâche ou une incohérence des données.

   Catégorie	Paramètre	Description
   N/A	Data Synchronization	DTS génère automatiquement un nom de tâche. Nous vous recommandons de spécifier un nom descriptif pour faciliter l'identification. Le nom n'a pas besoin d'être unique.
   Data Synchronization Tasks	Create Task	Pour utiliser une instance de base de données ajoutée au système (nouvellement créée ou enregistrée), sélectionnez l'instance de base de données dans la liste déroulante. Les informations de la base de données sont configurées automatiquement. Remarque Dans la console DMS, cet élément de configuration est nommé Task Name. Si vous n'avez pas ajouté l'instance de base de données au système, ou si vous n'avez pas besoin d'utiliser une instance déjà ajoutée, configurez manuellement les informations de base de données suivantes.
   	Source Database	Sélectionnez PolarDB for MySQL.
   	Connection Type	Sélectionnez Database Type.
   	Instance Region	Sélectionnez la région où réside le cluster PolarDB for MySQL source.
   	Replicate Data Across Alibaba Cloud Accounts	Cet exemple utilise une instance de base de données appartenant au compte Alibaba Cloud actuel. Sélectionnez Cloud Instance.
   	PolarDB Cluster ID	Sélectionnez l'ID du cluster PolarDB for MySQL source.
   	Database Account	Saisissez le compte de base de données du cluster PolarDB for MySQL source. Pour plus d'informations sur les autorisations requises, consultez Autorisations requises pour les comptes de base de données.
   	Database Password	Saisissez le mot de passe correspondant au compte de base de données.
   	Encryption	Sélectionnez une option en fonction de vos besoins. Pour plus d'informations, consultez Configurer le chiffrement SSL.
   Destination Database	Select Existing Connection	Pour utiliser une instance de base de données ajoutée au système (nouvellement créée ou enregistrée), sélectionnez l'instance de base de données dans la liste déroulante. Les informations de la base de données sont configurées automatiquement. Remarque Dans la console DMS, cet élément de configuration est nommé Select a DMS database instance.. Si vous n'avez pas ajouté l'instance de base de données au système, ou si vous n'avez pas besoin d'utiliser une instance déjà ajoutée, configurez manuellement les informations de base de données suivantes.
   	Database Type	Sélectionnez Select Existing Connection.
   	Select a DMS database instance.	Sélectionnez Cloud Instance.
   	MySQL	Sélectionnez la région où réside l'instance ApsaraDB RDS for MySQL de destination.
   	Connection Type	Cet exemple utilise une instance de base de données appartenant au compte Alibaba Cloud actuel. Sélectionnez No.
   	Instance Region	Sélectionnez l'ID de l'instance ApsaraDB RDS for MySQL de destination.
   	Replicate Data Across Alibaba Cloud Accounts	Saisissez le compte de base de données de l'instance ApsaraDB RDS for MySQL de destination. Pour plus d'informations sur les autorisations requises, consultez Autorisations requises pour les comptes de base de données.
   	No	Saisissez le mot de passe correspondant au compte de base de données.
   	RDS Instance ID	Sélectionnez Database Account ou Database Password selon vos besoins. Si vous sélectionnez Connection Method, vous devez activer le chiffrement SSL pour l'instance RDS for MySQL au préalable. Pour plus d'informations, consultez Utiliser un certificat cloud pour activer rapidement le chiffrement SSL.

   y_mak_v3a_r2j" colspan="1" rowspan="1">

   Non-encrypted

   Sélectionnez SSL-encrypted ou SSL-encrypted selon vos besoins. Si vous sélectionnez Connection Method, vous devez activer le chiffrement SSL pour l'instance RDS for MySQL au préalable. Pour plus d'informations, consultez Utiliser un certificat cloud pour activer rapidement le chiffrement SSL.

Sur la page Access Method, configurez les objets à synchroniser.

Paramètre	Description
Alibaba Cloud Instance	Test Connectivity est sélectionné. Par défaut, vous devez également sélectionner CIDR Blocks of DTS Servers et Configure Objects. Une fois la vérification préalable terminée, DTS effectue une synchronisation complète des données des objets sélectionnés depuis l'instance source vers le cluster de destination. Cela sert de base de référence pour la synchronisation incrémentielle des données ultérieure.
Synchronization Types	Sélectionnez la méthode de synchronisation des déclencheurs en fonction de vos besoins métier. Si les objets à synchroniser n'incluent pas de déclencheurs, il n'est pas nécessaire de configurer ce paramètre. Pour plus d'informations, consultez Configurer la synchronisation ou la migration des déclencheurs. Remarque Ce paramètre ne peut être configuré que si Incremental Data Synchronization inclut Schema Synchronization.
Full Data Synchronization	Sélectionnez Method to Migrate Triggers in Source Database.
Synchronization Types	Schema Synchronization : Vérifie si une table portant le même nom existe dans la base de données de destination. Si aucune table du même nom n'existe, la vérification préalable réussit. Si une table du même nom existe, la vérification préalable échoue et la tâche de synchronisation des données ne démarre pas. Remarque Si vous ne pouvez pas supprimer ou renommer la table portant le même nom dans la base de données de destination, vous pouvez la mapper vers un nom de table différent. Pour plus d'informations, consultez Mapper les noms de tables et de colonnes. Synchronization Topology : Ignore la vérification des doublons de noms de tables dans la base de données de destination. Avertissement La sélection de l'option One-way Synchronization peut entraîner une incohérence des données et mettre votre activité à risque. Par exemple : Si les schémas de table sont identiques et qu'un enregistrement de la base de données de destination possède la même valeur de clé primaire ou de clé unique qu'un enregistrement de la base de données source : Lors de la synchronisation complète, DTS conserve l'enregistrement dans le cluster de destination. L'enregistrement correspondant de la base de données source n'est pas synchronisé. Lors de la synchronisation incrémentielle, l'enregistrement de la base de données source écrase l'enregistrement de la base de données de destination. Si les schémas de table sont différents, la synchronisation initiale des données peut échouer. Cela peut entraîner la synchronisation partielle des données de colonne ou un échec complet de la synchronisation. Procédez avec prudence.
Processing Mode of Conflicting Tables	Spécifiez si vous souhaitez synchroniser les événements de la base de données source selon vos besoins. Si vous sélectionnez Precheck and Report Errors, vous devez également respecter les exigences correspondantes et effectuer les opérations suivantes. Pour plus d'informations, consultez Synchroniser ou migrer des événements.
Ignore Errors and Proceed	Vous pouvez configurer la politique de sensibilité à la casse pour les noms d'objets de base de données, de tables et de colonnes synchronisés vers l'instance de destination. Par défaut, la stratégie Ignore Errors and Proceed est sélectionnée. Vous pouvez également choisir d'utiliser les stratégies par défaut des bases de données source et de destination. Pour plus d'informations, consultez Politique de sensibilité à la casse pour les noms d'objets de destination.
Whether to migrate Event	Dans la zone Yes, cliquez sur un objet à synchroniser, puis cliquez sur pour le déplacer vers la zone Capitalization of Object Names in Destination Instance. Remarque Vous pouvez sélectionner des bases de données, des tables et des colonnes comme objets de synchronisation. Si vous sélectionnez des tables ou des colonnes, d'autres objets tels que les vues, les déclencheurs et les procédures stockées ne sont pas synchronisés vers la base de données de destination.
DTS default policy	Pour renommer un seul objet de synchronisation dans l'instance de destination, cliquez avec le bouton droit sur l'objet dans la zone Source Objects. Pour plus d'informations sur le renommage des objets, consultez Mapper une seule base de données, table ou colonne. Pour modifier les noms de plusieurs objets de synchronisation dans l'instance de destination par lot, cliquez sur Source Objects dans le coin supérieur droit de la zone Selected Objects. Pour plus d'informations, consultez Mapper des bases de données, tables et colonnes par lot. Remarque Pour filtrer les données par condition, cliquez avec le bouton droit sur la table à synchroniser dans la section Selected Objects, puis définissez les conditions de filtrage dans la boîte de dialogue qui s'affiche. Pour plus d'informations, consultez Filtrer les données de tâche avec une condition SQL. Pour sélectionner les opérations SQL à synchroniser au niveau de la base de données ou de la table, cliquez avec le bouton droit sur l'objet à synchroniser dans la section Selected Objects, puis sélectionnez les opérations SQL requises dans la boîte de dialogue qui s'affiche. Pour obtenir la liste des opérations prises en charge, consultez Opérations SQL prises en charge pour la synchronisation. Si vous utilisez la fonctionnalité de mappage de noms d'objets, la synchronisation d'autres objets dépendant de l'objet mappé peut échouer.

Cliquez sur Batch Edit pour configurer les paramètres avancés.

Paramètre	Description
Selected Objects	Par défaut, DTS planifie les tâches sur un cluster partagé et vous n'avez pas besoin de sélectionner un cluster. Pour des performances plus stables, vous pouvez acheter un cluster dédié pour exécuter les tâches de synchronisation DTS. Pour plus d'informations, consultez Qu'est-ce qu'un cluster dédié DTS ?.
Selected Objects	Si vous utilisez Data Management (DMS) ou gh-ost pour effectuer des modifications DDL en ligne dans la base de données source, vous pouvez choisir de synchroniser ou non les données des tables temporaires générées par les modifications DDL en ligne. Important Les tâches DTS ne prennent pas en charge l'utilisation d'outils tels que pt-online-schema-change pour effectuer des modifications DDL en ligne. L'utilisation de tels outils entraînera l'échec de la tâche DTS. Les méthodes de traitement pour chaque étape sont les suivantes : Les étapes Selected Objects et Next: Advanced Settings n'autorisent pas les opérations DDL qui modifient le schéma de la base de données ou de la table. Par conséquent, ces étapes ne sont pas contrôlées par la stratégie Online DDL. Dedicated Cluster for Task Scheduling : Cette étape n'est pas contrôlée par la stratégie Online DDL. Les tables temporaires associées sont créées. Copy the temporary table of the Online DDL tool that is generated in the source table to the destination database. : Cette étape n'est pas contrôlée par la stratégie Online DDL. Les tables temporaires ne sont pas incluses dans les objets de synchronisation complète. Toutes les tables dont les noms correspondent à l'expression régulière (^_(.+)_(?:gho|new)$ ou ^_(.+)_(?:ghc|del|old)$) sont filtrées. Schema Synchronization : Cette étape est contrôlée par la stratégie Online DDL. Full Data Synchronization : Synchronise les modifications de données dans les tables temporaires (par exemple, _table-name_gho) générées par les opérations DDL en ligne. Schema Synchronization et Full Data Synchronization : Filtre les modifications de données dans les tables temporaires (par exemple, _table-name_gho) générées par des outils tels que gh-ost, selon des règles d'expression régulière. Incremental Data Synchronization : Synchronise les données des tables temporaires générées par les modifications DDL en ligne. Remarque Si les données des tables temporaires générées par les modifications DDL en ligne sont trop volumineuses, cela peut entraîner une latence de synchronisation. Yes : Ne synchronise pas les données des tables temporaires générées par les opérations DDL en ligne. Elle synchronise uniquement les instructions DDL d'origine exécutées à l'aide de Data Management (DMS) dans la base de données source. Remarque Cette option entraîne le verrouillage des tables dans la base de données de destination. No, Adapt to DMS Online DDL : Ne synchronise pas les données des tables temporaires générées par les modifications DDL en ligne. Elle prend en charge des règles de filtrage personnalisées. DTS filtre les modifications de données dans les tables temporaires (par exemple, _table-name_gho) générées par des outils tels que gh-ost, selon des règles d'expression régulière. Vous pouvez modifier les expressions régulières par défaut utilisées pour faire correspondre les tables fantômes et les tables inutiles selon vos besoins : Table fantôme : ^_(.+)_(?:gho|new)$ Table inutile : ^_(.+)_(?:ghc|del|old)$ Remarque Cette option entraîne le verrouillage des tables dans la base de données de destination.
No, Adapt to gh-ost	Sélectionnez si vous souhaitez synchroniser les informations de compte de la base de données source en fonction de vos besoins métier. Si vous sélectionnez Yes, vous devez également sélectionner les comptes à synchroniser et confirmer les autorisations de compte.
No, Adapt to DMS Online DDL	Après le démarrage d'une tâche de synchronisation, si la connexion à la base de données source ou de destination échoue, DTS signale une erreur et commence immédiatement à retenter la connexion. La durée de nouvelle tentative par défaut est de 720 minutes. Vous pouvez également spécifier une durée de nouvelle tentative personnalisée comprise entre 10 et 1 440 minutes. Nous vous recommandons de définir la durée à 30 minutes ou plus. Si DTS se reconnecte avec succès à la base de données dans la durée spécifiée, la tâche de synchronisation reprend automatiquement. Sinon, la tâche échoue. Remarque Si vous disposez de plusieurs instances DTS (par exemple, l'instance A et l'instance B) qui partagent la même source ou la même destination, et que vous définissez la durée de nouvelle tentative réseau à 30 minutes pour l'instance A et à 60 minutes pour l'instance B, la durée la plus courte de 30 minutes sera utilisée pour les deux. Étant donné que DTS facture l'exécution de la tâche pendant la période de nouvelle tentative de connexion, nous vous recommandons de personnaliser la durée de nouvelle tentative en fonction de vos besoins métier ou de libérer l'instance DTS dès que possible après la libération des instances de base de données source et de destination.
No, Adapt to gh-ost	Après le démarrage de la tâche de synchronisation, si d'autres problèmes non liés à la connectivité surviennent avec la base de données source ou de destination (tels que des exceptions d'exécution DDL ou DML), DTS signale une erreur et commence immédiatement des opérations de nouvelle tentative continues. La durée de nouvelle tentative par défaut est de 10 minutes. Vous pouvez également personnaliser la durée de nouvelle tentative dans la plage de 1 à 1 440 minutes. Nous vous recommandons de la définir à 10 minutes ou plus. Si les opérations concernées aboutissent dans la durée de nouvelle tentative définie, la tâche de synchronisation reprend automatiquement. Sinon, la tâche échoue. Important La valeur de Whether to Migrate Accounts doit être inférieure à celle de Yes.
Retry Time for Failed Connections	Pendant l'étape de synchronisation complète, DTS consomme des ressources de lecture et d'écriture des bases de données source et de destination, ce qui peut augmenter la charge de la base de données. Pour réduire la charge sur les bases de données source et de destination, vous pouvez définir une limite de débit pour la tâche de synchronisation complète en configurant les paramètres Retry Time for Other Issues, Retry Time for Other Issues et Retry Time for Failed Connections. Remarque Cet élément de configuration est disponible uniquement lorsque Enable Throttling for Full Data Synchronization est défini sur Queries per second (QPS) to the source database. Vous pouvez également ajuster le débit de synchronisation complète une fois que l'instance de synchronisation est en cours d'exécution.
RPS of Full Data Migration	Vous pouvez également définir une limite de débit pour la tâche de synchronisation incrémentielle. Pour soulager la pression sur la base de données de destination, définissez les paramètres Data migration speed for full migration (MB/s) et Synchronization Types.
Full Data Synchronization	Vous pouvez sélectionner un tag d'environnement pour identifier l'instance en fonction de vos besoins métier. Dans cet exemple, il n'est pas nécessaire d'en sélectionner un.
Enable Throttling for Incremental Data Synchronization	Choisissez si vous souhaitez écrire les informations SQL de heartbeat dans la base de données source lorsque l'instance DTS est en cours d'exécution. RPS of Incremental Data Synchronization : Les informations SQL de heartbeat ne sont pas écrites dans la base de données source. Cela peut amener l'instance DTS à signaler un retard. Data synchronization speed for incremental synchronization (MB/s) : Écrit les informations SQL de heartbeat dans la base de données source. Cela peut interférer avec des fonctionnalités telles que la sauvegarde physique et le clonage de la base de données source.
Configure ETL	Choisissez si vous souhaitez activer la fonctionnalité extract, transform, and load (ETL). Pour plus d'informations, consultez Qu'est-ce que ETL ? Valeurs valides : Yes : Active la fonctionnalité ETL. Saisissez les instructions de traitement des données dans l'éditeur de code. Pour plus d'informations, consultez Configurer ETL dans une tâche de migration ou de synchronisation de données. Yes : Désactive la fonctionnalité ETL.
Monitoring and Alerting	Spécifiez si vous souhaitez configurer des alertes. Si la synchronisation échoue ou si la latence dépasse le seuil spécifié, une notification est envoyée à un contact d'alerte. No : Aucune alerte n'est configurée. Yes : Configurez les alertes en définissant un seuil d'alerte et en spécifiant un notification d'alerte. Pour plus d'informations, consultez Configurer la surveillance et les alertes lors de la configuration de la tâche.

1. Cliquez sur Next: Data Validation pour configurer une tâche de validation des données.

2. Si vous souhaitez utiliser la fonctionnalité de validation des données, consultez Configurer la validation des données pour obtenir les instructions de configuration.

Choose whether to write heartbeat SQL information to the source database when the DTS instance is running.

• Yes: Heartbeat SQL information is not written to the source database. This may cause the DTS instance to report a delay.

• No: Writes heartbeat SQL information to the source database. This may interfere with features such as physical backup and cloning of the source database.

Choose whether to enable the extract, transform, and load (ETL) feature. For more information, see What is ETL? Valid values:

• Whether to delete SQL operations on heartbeat tables of forward and reverse tasks: Enables the ETL feature. Enter data processing statements in the code editor. For more information, see Configure ETL in a data migration or data synchronization task.

• No: Disables the ETL feature.

Specify whether to configure alerts. If the synchronization fails or the latency exceeds the specified threshold, a notification is sent to an alert contact.

• Configure ETL: No alerts are configured.

• Yes: Configure alerts by setting an alert threshold and specifying an alert notification. For more information, see Configure monitoring and alerting during task configuration.

Specify whether to configure alerts. If the synchronization fails or the latency exceeds the specified threshold, a notification is sent to an alert contact.

• No: No alerts are configured.

• Monitoring and Alerting: Configure alerts by setting an alert threshold and specifying an alert notification. For more information, see Configure monitoring and alerting during task configuration.

1. When the Confirm Alert Details is 100 %, click Ignore.

2. On the OK page, select the billing method and link specification for the data synchronization instance. The following table describes these parameters in detail.

Catégorie	Paramètre	Description
Precheck Again	Mode de facturation	Abonnement : Vous payez lors de la création de l'instance. Cette option convient aux besoins à long terme et est plus rentable que le paiement à l'utilisation. Plus la durée d'abonnement est longue, plus la remise est importante. Paiement à l'utilisation : Vous êtes facturé à l'heure. Cette option convient aux besoins à court terme. Vous pouvez libérer l'instance immédiatement après utilisation pour économiser des coûts.
	Configuration du groupe de ressources	Le groupe de ressources auquel appartient l'instance. La valeur par défaut est le groupe de ressources par défaut. Pour plus d'informations, consultez Qu'est-ce que Resource Management ?.
	Spécification du lien	DTS propose des spécifications de synchronisation avec différents niveaux de performance. La spécification du lien de synchronisation affecte le taux de synchronisation. Vous pouvez choisir une spécification en fonction de votre scénario métier. Pour plus d'informations, consultez Spécifications des liens de synchronisation de données.
	Durée d'abonnement	En mode abonnement, sélectionnez la durée et la quantité pour l'instance d'abonnement. Vous pouvez choisir un abonnement mensuel de 1 à 9 mois, ou un abonnement annuel de 1, 2, 3 ou 5 ans. Remarque Cette option n'est disponible que lorsque le mode de facturation est Success Rate.

3. Une fois la configuration terminée, lisez et acceptez les Next: Purchase Instance.

4. Cliquez sur Purchase. Dans la boîte de dialogue New Instance Class, cliquez sur Subscription.

5. You can view the task progress on the Data Synchronization page.