AnalyticDB:Sincronizar dados com zero-ETL

Criar um AnalyticDB for MySQL

1. Acesse a página Role no console RAM.

2. Verifique se já existe uma função vinculada ao serviço chamada AliyunServiceRoleForAnalyticDBForMySQL. Caso contrário, crie essa função.

3. No painel de navegação à esquerda, clique em Create Role.

4. Na caixa de diálogo Create Role, selecione Alibaba Cloud Service e clique em Next.

5. Como tipo de função, escolha Service-Linked Role e selecione AnalyticDB for MySQL na lista suspensa de serviços.

6. Clique em Finish. Retorne à lista de funções e verifique se a função vinculada ao serviço foi criada.

Conceder permissões a um usuário RAM

Um usuário RAM precisa dos dois tipos de permissão abaixo para criar e gerenciar tarefas zero-ETL.

{
    "Version": "1",
    "Statement": [
        {
            "Effect": "Allow",
            "Action": "dts:*",
            "Resource": [
                "acs:adb:*:*:*",
                "acs:rds:*:*:*",
            ]
        },
        {
            "Effect": "Allow",
            "Action": [
                "dts:DescribeRegions",
                "dts:DescribeConfigRelations",
                "dts:DescribeSrcLinkConfig",
                "dts:DescribeDestLinkConfig",
                "dts:DescribeLinkConfig"
            ],
            "Resource": [
                "acs:dts:*:*:*"
            ]
        }
    ]
}

{
    "Version": "1",
    "Statement": [
        {
            "Effect": "Allow",
            "Action": "dts:*",
            "Resource": [
                "acs:adb:*:*:dbcluster/am-2zeod8ax4b9a****",
                "acs:rds:*:*:dbinstance/rm-2ze6fs8ouh43****",
            ]
        },
        {
            "Effect": "Allow",
            "Action": [
                "dts:DescribeRegions",
                "dts:DescribeConfigRelations",
                "dts:DescribeSrcLinkConfig",
                "dts:DescribeDestLinkConfig",
                "dts:DescribeLinkConfig"
            ],
            "Resource": "acs:dts:*:*:*"
        }
    ]
}

Procedimento

1. Faça login no console AnalyticDB for MySQL. No canto superior esquerdo do console, selecione uma região. No painel de navegação à esquerda, clique em Clusters. Localize o cluster desejado e clique no ID correspondente.

2. Acesse a página do recurso zero-ETL. O ponto de entrada varia conforme a edição do cluster.

   • Para clusters Enterprise Edition, Basic Edition ou Data Lakehouse Edition: No painel de navegação à esquerda, escolha Data Ingestion > Database Data Synchronization.

   • Para clusters Data Warehouse Edition: No painel de navegação à esquerda, escolha Data Transmission Service > Zero-ETL.

3. Clique em Create Zero-ETL Task. Na página Create Zero-ETL Task, configure as informações dos bancos de dados de origem e de destino.

   • Configure as informações do banco de dados de origem:

     Banco de dados de origem	Descrição
     Task Name	Nome da tarefa zero-ETL.
     Database Type	Selecione RDS for MySQL.
     Access Method	Somente Alibaba Cloud Instance é suportado.
     Instance Region	Região onde a instância RDS for MySQL está localizada.
     RDS Instance ID	ID da instância RDS for MySQL.
     Database Account	Conta do banco de dados da instância RDS for MySQL.
     Database Password	Senha da conta do banco de dados da instância RDS for MySQL.
     Encryption	Método de conexão com a instância RDS for MySQL. As opções incluem conexão não criptografada e conexão segura SSL. Nota Ao selecionar SSL-encrypted, é necessário ativar previamente a criptografia SSL na instância RDS for MySQL. Para mais detalhes, consulte Usar um certificado em nuvem para ativar rapidamente a criptografia SSL.

   • Defina as informações do banco de dados de destino:

     Banco de dados de destino	Descrição
     Database Type	Atualmente, apenas o AnalyticDB for MySQL 3.0 é suportado como destino.
     Access Method	Somente Alibaba Cloud Instance é suportado.
     Instance Region	Região onde o cluster AnalyticDB for MySQL está localizado.
     Instance ID	ID do cluster AnalyticDB for MySQL.
     Database Account	Conta do banco de dados do cluster AnalyticDB for MySQL.
     Database Password	Senha da conta do banco de dados do cluster AnalyticDB for MySQL.

4. Após configurar os parâmetros, clique em Test Connectivity and Proceed. Na página de configuração, defina os seguintes parâmetros:

   Parâmetro	Descrição
   DDL and DML Operations to Be Synchronized	Selecione as operações DML e DDL a serem sincronizadas. Todas as operações vêm selecionadas por padrão.
   Source Objects e Selected Objects	Objetos de origem no banco de dados e objetos que serão sincronizados.
   Advanced Settings (Optional)	Configure intervalos de nova tentativa para indisponibilidade do banco de dados e outros problemas potenciais.

5. Concluídas as configurações, clique em Next: Configure Database and Table Fields e defina as informações abaixo:

   Configuração	Descrição
   Database Name	Escolha um banco de dados existente.
   Table Name	Escolha uma tabela existente.
   Primary Key Column	Coluna de chave primária da tabela selecionada.
   Distribution Key	Coluna de chave de distribuição da tabela selecionada.
   Type	Tipo da tabela. As opções incluem tabela particionada e tabela replicada.
   Definition Status	Após a configuração dos campos de banco de dados e tabela, o status muda de Undefined para Defined.

6. Depois de definir todos os parâmetros, clique em Next: Save Task Settings and Precheck.

7. Se a pré-verificação for bem-sucedida, clique em Start para iniciar a tarefa zero-ETL.

   Na página Zero-ETL, visualize as informações da tarefa, incluindo ID/Name, Source/Destination e Status.

1. Faça login no console Cloud Monitor.

2. Visualize as informações de monitoramento.

   1. No painel de navegação à esquerda, escolha Cloud Service Monitoring > Cloud Service Monitoring.

   2. Passe o mouse sobre o cartão AnalyticDB for MySQL e clique em AnalyticDB for mysql 3.0 - ZeroETL Latency.

   3. Clique em um ID de cluster para visualizar as informações de monitoramento das tarefas zero-ETL desse cluster.

3. Crie uma regra de alerta.

   1. No painel de navegação à esquerda, clique em Alerts > Alert Rules.

   2. Clique em Create Alert Rule. No painel Create Alert Rule, configure uma regra de alerta para a tarefa zero-ETL. Para mais informações, consulte Criar uma regra de alerta.

      Nota

      No parâmetro Product, selecione AnalyticDB for mysql 3.0 - ZeroETL Latency.

4. Crie uma política de assinatura.

   1. No painel de navegação à esquerda, clique em Event Center > Event Subscription.

   2. Clique em Create a subscription policy. Na página Create a subscription policy, configure a política de assinatura para a tarefa zero-ETL. Para mais informações, consulte Criar uma assinatura de evento.

      Nota

      • Product: Selecione Analyticdb for mysql 3.0.

      • event types: Escolha Abnormal ou Restore.

      • Event Name: Escolha zero_etl_job_abnormal ou zero_etl_job_restore.