AnalyticDB:Sincronizar dados com zero-ETL

Criar um AnalyticDB for MySQL

1. Acesse a página Role no console RAM.

2. Verifique se já existe uma função vinculada ao service chamada AliyunServiceRoleForAnalyticDBForMySQL. Caso contrário, crie a função.

3. No painel de navegação à esquerda, clique em Create Role.

4. Na caixa de diálogo Create Role, selecione Alibaba Cloud Service e clique em Next.

5. Como tipo de função, selecione Service-Linked Role e, em seguida, escolha AnalyticDB for MySQL na lista suspensa de serviços.

6. Clique em Finish. Retorne à lista de funções e verifique se a função vinculada ao service foi criada.

Conceder permissões a um usuário RAM

Um usuário RAM precisa dos dois tipos de permissão a seguir para criar e gerenciar tarefas zero-ETL.

{
    "Version": "1",
    "Statement": [
        {
            "Effect": "Allow",
            "Action": "dts:*",
            "Resource": [
                "acs:adb:*:*:*",
                "acs:rds:*:*:*",
            ]
        },
        {
            "Effect": "Allow",
            "Action": [
                "dts:DescribeRegions",
                "dts:DescribeConfigRelations",
                "dts:DescribeSrcLinkConfig",
                "dts:DescribeDestLinkConfig",
                "dts:DescribeLinkConfig"
            ],
            "Resource": [
                "acs:dts:*:*:*"
            ]
        }
    ]
}

{
    "Version": "1",
    "Statement": [
        {
            "Effect": "Allow",
            "Action": "dts:*",
            "Resource": [
                "acs:adb:*:*:dbcluster/am-2zeod8ax4b9a****",
                "acs:rds:*:*:dbinstance/rm-2ze6fs8ouh43****",
            ]
        },
        {
            "Effect": "Allow",
            "Action": [
                "dts:DescribeRegions",
                "dts:DescribeConfigRelations",
                "dts:DescribeSrcLinkConfig",
                "dts:DescribeDestLinkConfig",
                "dts:DescribeLinkConfig"
            ],
            "Resource": "acs:dts:*:*:*"
        }
    ]
}

Procedimento

1. Faça login no console do AnalyticDB for MySQL. No canto superior esquerdo do console, selecione uma região. No painel de navegação à esquerda, clique em Clusters. Localize o cluster que deseja gerenciar e clique em no ID do cluster.

2. Acesse a página do recurso zero-ETL. O ponto de entrada varia conforme a edição do cluster.

   • Para um cluster Enterprise Edition, Basic Edition ou Data Lakehouse Edition: No painel de navegação à esquerda, escolha Data Ingestion > Database Data Synchronization.

   • Para um cluster Data Warehouse Edition: No painel de navegação à esquerda, escolha Data Transmission Service > Zero-ETL.

3. Clique em Create Zero-ETL Task. Na página Create Zero-ETL Task, configure as informações dos bancos de dados de source e de destino.

   • Configure as informações do banco de dados de source:

     Banco de dados de source	Descrição
     Task Name	Nome da tarefa zero-ETL.
     Database Type	Selecione RDS for MySQL.
     Access Method	Somente Alibaba Cloud Instance é suportado.
     Instance Region	Região onde a instância RDS for MySQL está localizada.
     RDS Instance ID	ID da instância RDS for MySQL.
     Database Account	Conta do banco de dados da instância RDS for MySQL.
     Database Password	Senha da conta do banco de dados da instância RDS for MySQL.
     Encryption	Método de conexão com a instância RDS for MySQL. As opções incluem conexão não criptografada e conexão segura SSL. Nota Se você selecionar SSL-encrypted, será necessário ativar primeiro a criptografia SSL para a instância RDS for MySQL. Para mais informações, consulte Use a cloud certificate to quickly enable SSL encryption.

   • Configure as informações do banco de dados de destino:

     Banco de dados de destino	Descrição
     Database Type	Atualmente, apenas o AnalyticDB for MySQL 3.0 é suportado como destino.
     Access Method	Somente Alibaba Cloud Instance é suportado.
     Instance Region	Região onde o cluster AnalyticDB for MySQL está localizado.
     Instance ID	ID do cluster AnalyticDB for MySQL.
     Database Account	Conta do banco de dados do cluster AnalyticDB for MySQL.
     Database Password	Senha da conta do banco de dados do cluster AnalyticDB for MySQL.

4. Após configurar os parâmetros, clique em Test Connectivity and Proceed. Na página de configuração, defina os seguintes parâmetros:

   Parâmetro	Descrição
   DDL and DML Operations to Be Synchronized	Selecione as operações DML e DDL a serem sincronizadas. Todas as operações vêm selecionadas por padrão.
   Source Objects e Selected Objects	Objetos de source no banco de dados e objetos a serem sincronizados.
   Advanced Settings (Optional)	Configure intervalos de nova tentativa para indisponibilidade do banco de dados e outros problemas potenciais.

5. Depois de concluir as configurações, clique em Next: Configure Database and Table Fields e configure as seguintes informações:

   Configuração	Descrição
   Database Name	Selecione um banco de dados existente.
   Table Name	Selecione uma tabela existente.
   Primary Key Column	Coluna de chave primária da tabela selecionada.
   Distribution Key	Coluna de chave de distribuição da tabela selecionada.
   Type	Tipo da tabela. As opções incluem tabela particionada e tabela replicada.
   Definition Status	Após a configuração dos campos de banco de dados e tabela, o status muda de Undefined para Defined.

6. Após configurar todos os parâmetros, clique em Next: Save Task Settings and Precheck.

7. Se a pré-verificação for bem-sucedida, clique em Start para iniciar a tarefa zero-ETL.

   Na página Zero-ETL, visualize informações sobre a tarefa, incluindo seu ID/Name, Source/Destination e Status.

1. Faça login no console Cloud Monitor.

2. Visualize as informações de monitoramento.

   1. No painel de navegação à esquerda, escolha Cloud Service Monitoring > Cloud Service Monitoring.

   2. Passe o mouse sobre o cartão AnalyticDB for MySQL e clique em AnalyticDB for mysql 3.0 - ZeroETL Latency.

   3. Clique em um ID de cluster para visualizar as informações de monitoramento das tarefas zero-ETL nesse cluster.

3. Crie uma regra de alerta.

   1. No painel de navegação à esquerda, clique em Alerts > Alert Rules.

   2. Clique em Create Alert Rule. No painel Create Alert Rule, configure uma regra de alerta para a tarefa zero-ETL. Para mais informações, consulte Create an alert rule.

      Nota

      Para o parâmetro Product, selecione AnalyticDB for mysql 3.0 - ZeroETL Latency.

4. Crie uma política de assinatura.

   1. No painel de navegação à esquerda, clique em Event Center > Event Subscription.

   2. Clique em Create a subscription policy. Na página Create a subscription policy, configure a política de assinatura para a tarefa zero-ETL. Para mais informações, consulte Create an event subscription.

      Nota

      • Product: Selecione Analyticdb for mysql 3.0.

      • event types: Selecione Abnormal ou Restore.

      • Event Name: Selecione zero_etl_job_abnormal ou zero_etl_job_restore.