Data Transmission Service:Présentation de Data Transmission Service (DTS)

Fonctionnalités principales

DTS propose cinq fonctions couvrant l'intégralité du cycle de vie du déplacement des données :

Fonctionnement du transfert de données par DTS

Pour les tâches de migration et de synchronisation, DTS utilise une approche en deux phases, illustrée ici pour une migration typique :

1. Chargement complet — DTS copie un instantané complet des données source vers la destination.

2. Synchronisation incrémentielle — Pendant le chargement complet, DTS capture toutes les modifications en cours via les journaux de la base de données source (comme le journal binaire (Binlog) pour MySQL ou le journal de pré-écriture (WAL) pour PostgreSQL) et les applique à la destination une fois l'instantané terminé.

Cette approche en deux phases permet de maintenir la base de données source pleinement opérationnelle tout au long du processus. Une fois que la destination est synchronisée avec la source, vous basculez le trafic, généralement en quelques minutes.

Les tâches de synchronisation des données suivent le même modèle, mais exécutent la phase incrémentielle en continu pour maintenir un réplica toujours à jour.

Principaux avantages

Compatibilité étendue

DTS se connecte aux bases de données relationnelles (MySQL, PostgreSQL, SQL Server, Oracle), aux magasins NoSQL (MongoDB, Redis) et aux entrepôts de big data (AnalyticDB, MaxCompute). Pour la liste complète, consultez la rubrique Bases de données prises en charge.

Le service prend également en charge des topologies inter-environnements : du site local vers Alibaba Cloud (ApsaraDB RDS, PolarDB), d'un cloud à un autre, ainsi que des configurations hybrides, via des réseaux publics, Express Connect, VPN Gateway ou Smart Access Gateway (SAG). Pour les scénarios inter-comptes, configurez les tâches à l'aide de l'autorisation RAM.

Hautes performances

• Migration complète : débit allant jusqu'à 70 Mo/s avec compression multithread pour réduire l'utilisation de la bande passante

• Synchronisation en temps réel : jusqu'à 30 000 requêtes par seconde (RPS) avec concurrence au niveau des transactions

Fiabilité et sécurité

Le cluster de service DTS assure un basculement automatique en cas de défaillance d'un nœud, garantissant une disponibilité continue. DTS vérifie l'intégrité des données en permanence. Toutes les transmissions utilisent des protocoles chiffrés, une authentification par jeton sécurisé et un chiffrement SSL. Pour la synchronisation transfrontalière et interrégionale, des connexions réseau dédiées offrent une isolation supplémentaire.

Simplicité d'utilisation

Créez et surveillez vos tâches via un assistant visuel dans la console DTS. Si une exception réseau ou système interrompt une tâche, DTS reprend automatiquement là où elle s'était arrêtée (reprise sur point d'arrêt), sans intervention manuelle nécessaire.

Cas d'utilisation

Migration vers le cloud sans interruption de service

Utilisez la Migration de données pour transférer des bases de données locales ou auto-gérées sur ECS vers ApsaraDB RDS ou PolarDB. L'approche en deux phases (chargement complet + synchronisation incrémentielle) permet de maintenir la source en fonctionnement continu, réduisant le basculement de l'application à quelques minutes.

Architecture actif-actif géoredondante et reprise après sinistre

Recourez à la Synchronisation des données pour mettre en place une architecture géoredondante avec synchronisation bidirectionnelle entre des bases de données situées dans différentes régions. En cas de panne, le trafic bascule rapidement vers la région de secours, assurant la continuité des activités.

Mise à jour en temps réel de l'entrepôt de données et du cache

Utilisez l'Abonnement aux données pour diffuser les modifications de la base de données vers AnalyticDB, ClickHouse ou Redis. DTS capture les journaux source et les livre sous forme de flux JSON structuré, permettant à votre application d'écrire directement dans l'entrepôt de données ou de mettre à jour le cache sans middleware supplémentaire.

Nettoyage et formatage des données en transit

Exploitez la Transformation des données pour traiter les données lors de leur déplacement, par exemple en masquant les champs sensibles ou en fusionnant des colonnes source dans un nouveau champ de destination pendant la synchronisation. Cela élimine le besoin d'une couche de transformation distincte côté destination.

Validation de la cohérence des données

Faites appel à la Validation des données après une migration majeure ou tout au long d'une tâche de synchronisation de longue durée pour confirmer l'exactitude des données. Elle exécute des comparaisons complètes ou par plage et identifie précisément les tables et les lignes présentant des écarts.

Premiers pas

1. Identifiez la fonction DTS adaptée à votre scénario (consultez la rubrique Quelle est la différence entre la migration et la synchronisation des données ? en cas de doute).

2. Vérifiez que votre base de données figure dans la liste des bases de données prises en charge.

3. Créez une tâche dans la console DTS ou via l'API ou le SDK :

   • Tutoriels de migration de données

   • Tutoriels de synchronisation des données

   • Tutoriels d'abonnement aux données

Étapes suivantes

• Architecture du produit — conception du système et concepts internes

• Spécifications — spécifications de performance pour différents types de tâches

• Concepts de base — référence terminologique

• DTS Insight — assistant intelligent d'exploitation et de maintenance qui surveille l'état des tâches et aide au dépannage

FAQ