AnalyticDB:Synchroniser des données avec zero-ETL

Créer un rôle de service lié pour AnalyticDB for MySQL

1. Accédez à la page Role dans la console RAM.

2. Vérifiez si un rôle lié au service nommé AliyunServiceRoleForAnalyticDBForMySQL existe déjà. Sinon, créez le rôle.

3. Dans le volet de navigation de gauche, cliquez sur Create Role.

4. Dans la boîte de dialogue Create Role, sélectionnez Alibaba Cloud Service et cliquez sur Next.

5. Pour le type de rôle, sélectionnez Service-Linked Role, puis sélectionnez AnalyticDB for MySQL dans la liste déroulante des services.

6. Cliquez sur Finish. Revenez à la liste des rôles et vérifiez que le rôle lié au service a bien été créé.

Accorder des autorisations à un utilisateur RAM

Un utilisateur RAM a besoin des deux types d'autorisations suivants pour créer et gérer des tâches zero-ETL.

{
    "Version": "1",
    "Statement": [
        {
            "Effect": "Allow",
            "Action": "dts:*",
            "Resource": [
                "acs:adb:*:*:*",
                "acs:rds:*:*:*",
            ]
        },
        {
            "Effect": "Allow",
            "Action": [
                "dts:DescribeRegions",
                "dts:DescribeConfigRelations",
                "dts:DescribeSrcLinkConfig",
                "dts:DescribeDestLinkConfig",
                "dts:DescribeLinkConfig"
            ],
            "Resource": [
                "acs:dts:*:*:*"
            ]
        }
    ]
}

{
    "Version": "1",
    "Statement": [
        {
            "Effect": "Allow",
            "Action": "dts:*",
            "Resource": [
                "acs:adb:*:*:dbcluster/am-2zeod8ax4b9a****",
                "acs:rds:*:*:dbinstance/rm-2ze6fs8ouh43****",
            ]
        },
        {
            "Effect": "Allow",
            "Action": [
                "dts:DescribeRegions",
                "dts:DescribeConfigRelations",
                "dts:DescribeSrcLinkConfig",
                "dts:DescribeDestLinkConfig",
                "dts:DescribeLinkConfig"
            ],
            "Resource": "acs:dts:*:*:*"
        }
    ]
}

Procédure

1. Connectez-vous à la console AnalyticDB for MySQL. Dans le coin supérieur gauche de la console, sélectionnez une région. Dans le volet de navigation de gauche, cliquez sur Clusters. Recherchez le cluster que vous souhaitez gérer et cliquez sur son ID.

2. Accédez à la page de la fonctionnalité zero-ETL. Le point d'entrée varie selon l'édition du cluster.

   • Pour un cluster Enterprise Edition, Basic Edition ou Data Lakehouse Edition : Dans le volet de navigation de gauche, choisissez Data Ingestion > Database Data Synchronization.

   • Pour un cluster Data Warehouse Edition : Dans le volet de navigation de gauche, choisissez Data Transmission Service > Zero-ETL.

3. Cliquez sur Create Zero-ETL Task. Sur la page Create Zero-ETL Task, configurez les informations de la base de données source et de la base de données de destination.

   • Configurez les informations de la base de données source :

     Base de données source	Description
     Task Name	Le nom de la tâche zero-ETL.
     Database Type	Sélectionnez RDS for MySQL.
     Access Method	Seule l'option Alibaba Cloud Instance est prise en charge.
     Instance Region	La région où se trouve l'instance RDS for MySQL.
     RDS Instance ID	L'ID de l'instance RDS for MySQL.
     Database Account	Le compte de base de données pour l'instance RDS for MySQL.
     Database Password	Le mot de passe du compte de base de données de l'instance RDS for MySQL.
     Encryption	La méthode de connexion à l'instance RDS for MySQL. Les options incluent la connexion non chiffrée et la connexion sécurisée SSL. Remarque Si vous sélectionnez SSL-encrypted, vous devez d'abord activer le chiffrement SSL pour l'instance RDS for MySQL. Pour plus d'informations, consultez la rubrique Utiliser un certificat cloud pour activer rapidement le chiffrement SSL.

   • Configurez les informations de la base de données de destination :

     Base de données de destination	Description
     Database Type	Actuellement, seule l'option AnalyticDB for MySQL 3.0 est prise en charge comme destination.
     Access Method	Seule l'option Alibaba Cloud Instance est prise en charge.
     Instance Region	La région où se trouve le cluster AnalyticDB for MySQL.
     Instance ID	L'ID du cluster AnalyticDB for MySQL.
     Database Account	Le compte de base de données pour le cluster AnalyticDB for MySQL.
     Database Password	Le mot de passe du compte de base de données du cluster AnalyticDB for MySQL.

4. Une fois les paramètres configurés, cliquez sur Test Connectivity and Proceed. Sur la page de configuration, définissez les paramètres suivants :

   Paramètre	Description
   DDL and DML Operations to Be Synchronized	Sélectionnez les opérations DML et DDL à synchroniser. Toutes les opérations sont sélectionnées par défaut.
   Source Objects et Selected Objects	Les objets source dans la base de données et les objets à synchroniser.
   Advanced Settings (Optional)	Configurez les intervalles de nouvelle tentative en cas d'indisponibilité de la base de données et d'autres problèmes potentiels.

5. Une fois les paramètres définis, cliquez sur Next: Configure Database and Table Fields et configurez les informations suivantes :

   Configuration	Description
   Database Name	Sélectionnez une base de données existante.
   Table Name	Sélectionnez une table existante.
   Primary Key Column	La colonne de clé primaire de la table sélectionnée.
   Distribution Key	La colonne de clé de distribution de la table sélectionnée.
   Type	Le type de table. Les options incluent la table partitionnée et la table répliquée.
   Definition Status	Une fois les champs de la base de données et de la table configurés, le statut passe de Non défini à Défini.

6. Après avoir configuré tous les paramètres, cliquez sur Next: Save Task Settings and Precheck.

7. Si la pré-vérification réussit, cliquez sur Start pour lancer la tâche zero-ETL.

   Sur la page Zero-ETL, vous pouvez consulter les informations relatives à la tâche, notamment son ID/Name, sa Source/Destination et son Status.

1. Connectez-vous à la console Cloud Monitor.

2. Consultez les informations de surveillance.

   1. Dans le volet de navigation de gauche, choisissez Cloud Service Monitoring > Cloud Service Monitoring.

   2. Placez le curseur sur la carte AnalyticDB for MySQL et cliquez sur AnalyticDB for mysql 3.0 - ZeroETL Latency.

   3. Cliquez sur un ID de cluster pour afficher les informations de surveillance des tâches zero-ETL de ce cluster.

3. Créez une règle d'alerte.

   1. Dans le volet de navigation de gauche, cliquez sur Alerts > Alert Rules.

   2. Cliquez sur Create Alert Rule. Dans le panneau Create Alert Rule, configurez une règle d'alerte pour la tâche zero-ETL. Pour plus d'informations, consultez la rubrique Créer une règle d'alerte.

      Remarque

      Pour le paramètre Product, sélectionnez AnalyticDB for mysql 3.0 - ZeroETL Latency.

4. Créez une politique d'abonnement.

   1. Dans le volet de navigation de gauche, cliquez sur Event Center > Event Subscription.

   2. Cliquez sur Create a subscription policy. Sur la page Create a subscription policy, configurez la politique d'abonnement pour la tâche zero-ETL. Pour plus d'informations, consultez la rubrique Créer un abonnement aux événements.

      Remarque

      • Product : Sélectionnez Analyticdb for mysql 3.0.

      • event types : Sélectionnez Abnormal ou Restore.

      • Event Name : Sélectionnez zero_etl_job_abnormal ou zero_etl_job_restore.