Data Transmission Service:Synchroniser les données d'un cluster PolarDB for MySQL vers une instance Lindorm

Prérequis

Avant de commencer, assurez-vous de disposer des éléments suivants :

• Une instance Lindorm utilisant le moteur LindormTable, avec un espace de stockage disponible supérieur à l'espace de stockage utilisé par le cluster source PolarDB for MySQL. Consultez la rubrique Créer une instance.

• La fonctionnalité de compatibilité MySQL activée sur l'instance Lindorm de destination. Consultez la rubrique Activer la fonctionnalité de compatibilité MySQL.

• Une base de données (namespace) et une table large pré-partitionnée créées dans l'instance Lindorm de destination pour recevoir les données synchronisées. Consultez les rubriques Utiliser un client MySQL pour se connecter à LindormTable et l'utiliser, Utiliser Lindorm-cli pour se connecter au moteur de table large et l'utiliser, Utiliser Lindorm Shell pour accéder à LindormTable, CREATE TABLE et Mappage des types de données.

• La journalisation binaire activée sur le cluster source PolarDB for MySQL, avec le paramètre loose_polar_log_bin défini sur ON. Consultez les rubriques Activer la journalisation binaire et Modifier les paramètres.

  L'activation de la journalisation binaire pour un cluster PolarDB for MySQL entraîne des frais supplémentaires pour l'espace de stockage occupé par les journaux binaires.

• Une rétention des journaux binaires d'au moins trois jours sur le cluster source (sept jours recommandés). Consultez la rubrique Modifier la période de rétention. Une rétention insuffisante peut provoquer une incohérence ou une perte de données et peut affecter l'accord de niveau de service (SLA) de DTS.

• Des comptes de base de données disposant des autorisations requises. Consultez la section Autorisations requises pour les comptes de base de données.

Les objets créés dans l'instance Lindorm de destination doivent respecter les exigences spécifiées dans la rubrique Quotas et limites .

Facturation

Opérations SQL prises en charge pour la synchronisation incrémentielle

En raison des limitations du moteur LindormTable, DTS supprime les attributs supplémentaires des instructions ADD COLUMN. Par exemple, si la source exécute ALTER TABLE test ADD COLUMN col INT DEFAULT 0; , DTS exécute ALTER TABLE test ADD COLUMN col INT; sur la destination.

Autorisations requises pour les comptes de base de données

Limitations

• La synchronisation du schéma n'est pas prise en charge. Seules la synchronisation complète des données et la synchronisation incrémentielle des données sont disponibles.

• Les données de type BIT ne peuvent pas être synchronisées.

• Les données à synchroniser doivent contenir au moins un champ qui n'est pas une clé primaire. La synchronisation exclusive des champs de clé primaire n'est pas prise en charge.

• Les tables à synchroniser doivent posséder des contraintes PRIMARY KEY ou UNIQUE avec tous les champs uniques. Dans le cas contraire, la destination peut contenir des enregistrements en double.

• Lorsque vous sélectionnez des tables comme objets de synchronisation et que vous renommez des tables ou des colonnes dans la destination, une seule tâche prend en charge un maximum de 1 000 tables. Le dépassement de cette limite provoque une erreur de requête. Dans ce cas, configurez plusieurs tâches ou synchronisez la base de données entière.

• DTS ne synchronise pas les nœuds en lecture seule du cluster source PolarDB for MySQL.

• DTS ne synchronise pas les tables externes Object Storage Service (OSS) depuis le cluster source PolarDB for MySQL.

• DTS ne prend pas en charge le basculement primaire/secondaire pendant la synchronisation complète des données. Si un basculement se produit, reconfigurez la tâche de synchronisation.

• Les données ne peuvent être écrites que dans le moteur de table large de l'instance Lindorm.

• Les chaînes vides de type VARBINARY sont traitées comme des valeurs nulles dans DTS et l'instance Lindorm.

• Si la précision du type DECIMAL diffère entre les champs source et destination, la tâche échoue.

• Les données de l'instance Lindorm doivent respecter les exigences décrites dans la rubrique Limites des demandes de données. Dans le cas contraire, la tâche échoue.

• N'effectuez pas d'opérations DDL sur la base de données source pendant la synchronisation complète des données, car cela entraînerait l'échec de la tâche. DTS interroge la source durant cette phase, ce qui crée des verrous de métadonnées pouvant également bloquer les opérations DDL sur la source.

• N'utilisez pas d'outils tels que pt-online-schema-change pour effectuer des opérations DDL en ligne sur les objets synchronisés pendant la synchronisation. Cela provoquerait l'échec de la tâche.

• Si des données non gérées par DTS sont écrites dans la destination pendant la synchronisation, une incohérence des données peut survenir.

• Pendant la synchronisation initiale complète des données, les opérations INSERT concurrentes provoquent une fragmentation des tables dans la destination. Une fois la synchronisation initiale complète terminée, l'espace de stockage de la table de destination sera supérieur à celui de la source.

• Pendant la synchronisation initiale complète des données, DTS utilise les ressources en lecture et écriture des deux bases de données, ce qui peut augmenter la charge du serveur. Planifiez la synchronisation pendant les heures creuses, par exemple lorsque la charge CPU des deux bases de données est inférieure à 30 %.

• DTS exécute périodiquement CREATE DATABASE IF NOT EXISTS sur la base de données source pour faire avancer la position du fichier de journal binaire.

• En cas d'échec d'une instance DTS, l'équipe DTS tentera une récupération dans un délai de 8 heures. La récupération peut impliquer le redémarrage de l'instance ou l'ajustement des paramètres de l'instance DTS (les paramètres de la base de données ne sont pas modifiés). Les paramètres susceptibles d'être ajustés sont décrits dans la rubrique Modifier les paramètres de l'instance.

• La synchronisation des données de type VECTOR n'est pas prise en charge.

Configurer une tâche de synchronisation