Une source de données connecte Data Integration à des bases de données et à des services de stockage tels que MaxCompute, MySQL et OSS. Elle définit l'emplacement depuis lequel les tâches de synchronisation lisent les données et vers lequel elles les écrivent.
Rôle d'une source de données
Une source de données sert de endpoint pour le flux de données :
Source (Reader) : la tâche lit les données depuis la source.
Destination (Writer) : la tâche écrit les données traitées vers la destination.
Avant de synchroniser des données, configurez une source et une destination disposant d'une connectivité réseau stable.
Types de sources de données pris en charge
Data Integration prend en charge les types de sources de données répertoriés dans la rubrique Sources de données et solutions de synchronisation prises en charge. La configuration varie selon le type.
Créer une source de données
Créez et gérez toutes les sources de données dans Management Center. Ces sources de données sont réutilisables, prennent en charge l'isolation des environnements et respectent les bonnes pratiques entreprises.
Configuration : consultez la rubrique Gestion des sources de données.
Vous pouvez créer une source de données dans Management Center ou dans Data Integration. Le tableau suivant compare ces deux méthodes.
|
Fonctionnalité |
Management Center (recommandé) |
Data Integration |
|
Emplacement de gestion |
. |
. |
|
Prend en charge des configurations distinctes pour les environnements de développement et de production afin d'isoler les données. |
Non pris en charge. Seul l'environnement de production est disponible. |
|
|
Réutilisabilité multi-modules |
Utilisable dans tous les modules : Data Integration, Data Studio et analyse des données. |
Fonctionnalités limitées dans les autres modules. |
|
Contrôle des autorisations |
Prend en charge l'autorisation inter-workspace. |
Ne prend pas en charge l'autorisation. |
|
Mode applicable |
Recommandé pour les workspaces en mode standard. |
Convient au mode basique ou au mode standard sans isolation. |
|
Capacité de clonage |
Prend en charge le clonage des sources de données. |
Non pris en charge. |
Les deux méthodes prennent en charge l'authentification tierce et la configuration des sources de données à l'aide d'un rôle RAM .
La procédure de création d'une source de données est identique dans les deux emplacements.
La création d'une source de données dans Management Center génère automatiquement une source de données correspondante dans Data Integration. Les deux partagent la même configuration pour l'environnement de production.
La création d'une source de données dans Data Integration génère automatiquement une source de données correspondante dans Management Center avec uniquement la configuration de l'environnement de production. Vous devez ajouter manuellement la configuration de l'environnement de développement.
Les paramètres de configuration varient selon le type de source de données. Consultez la rubrique Liste des sources de données.
Utilisation des sources de données
Mode basique :
Les workspaces en mode basique disposent d'un seul environnement. Les sources de données dans Management Center et Data Integration sont identiques.
Mode standard :
Un workspace en mode standard prend en charge l'isolation des environnements pour les sources de données. Chaque source de données peut disposer de configurations distinctes pour l'environnement de développement et l'environnement de production, pointant vers différentes bases de données ou instances.
Dans Data Integration, seules les tâches de synchronisation par lots pour une seule table prennent en charge l'isolation des environnements. Les autres tâches de synchronisation utilisent la source de données de l'environnement de production.
Les sources de données créées dans Data Integration ne contiennent que la configuration de l'environnement de production. Pour les utiliser dans Data Studio ou dans la synchronisation par lots pour une seule table, ajoutez la configuration de l'environnement de développement dans Management Center.
Étapes suivantes
Une fois que la source de données a passé le test de connectivité, configurez une tâche de synchronisation :
Synchronisation par lots pour une seule table : Configurer à l'aide de l'interface sans code et Configurer à l'aide de l'éditeur de code.
Synchronisation en temps réel pour une seule table : Configurer une tâche de synchronisation en temps réel pour une seule table.
Synchronisation par lots pour une base de données complète : Configurer une tâche de synchronisation par lots pour une base de données complète.
Synchronisation en temps réel pour une base de données complète : Configurer une tâche de synchronisation en temps réel pour une base de données complète.
Synchronisation complète et incrémentielle pour une base de données complète : Configurer une tâche de synchronisation complète et incrémentielle pour une base de données complète
FAQ
Pour plus d'informations sur les sources de données, consultez la rubrique FAQ sur Data Integration.