O recurso de rastreamento de alterações permite assinar dados incrementais em tempo real para cenários como atualizações leves de cache, desacoplamento assíncrono de serviços e sincronização de dados em tempo real com processos de extração, transformação e carga (ETL). Este tópico descreve como criar uma tarefa de rastreamento de alterações para PolarDB for MySQL.
Pré-requisitos
Você criou um cluster PolarDB for MySQL. Para obter mais informações, consulte Create a pay-as-you-go cluster e Create a subscription cluster.
O DTS oferece suporte apenas a instâncias PolarDB for MySQL que executam MySQL 5.6, 5.7 ou 8.0.
Você criou uma Virtual Private Cloud (VPC) and a vSwitch para a instância de assinatura de dados.
Limitações
Tipo | Descrição |
Limitações do banco de dados de origem |
|
Outras limitações |
|
Procedimento
-
Use um dos métodos a seguir para acessar a página Change Tracking Tasks e selecione a região em que a instância de rastreamento de alterações reside.
Console do DTS
Faça logon no console do DTS.
No painel de navegação à esquerda, clique em Change Tracking.
No canto superior esquerdo da página, selecione a região em que a instância de rastreamento de alterações reside.
Console do DMS
NotaAs operações reais podem variar de acordo com o modo e o layout do console do DMS. Para obter mais informações, consulte Simple mode console e Customize DMS console layout and style.
Faça logon no console do DMS.
Na barra de navegação superior, mova o ponteiro sobre .
Na lista suspensa à direita de Change Tracking Tasks, selecione a região em que a instância de rastreamento de alterações reside.
Clique em Create Task para acessar a página de configuração da tarefa.
-
Configure os parâmetros nas seções Source Database e Consumer Network Type.
AvisoDepois de especificar a instância de banco de dados de origem, recomendamos ler os Limits exibidos na parte superior da página. Caso contrário, a tarefa poderá falhar ou os dados rastreados talvez não possam ser consumidos.
Categoria
Parâmetro
Descrição
N/D
Task Name
O nome da tarefa de rastreamento de alterações. O DTS atribui automaticamente um nome à tarefa. Recomendamos especificar um nome descritivo para facilitar a identificação da tarefa. Não é necessário usar um nome de tarefa exclusivo.
Source Database
Select Existing Connection
Para usar uma instância de banco de dados que você gerencia em Manage database connections, selecione-a na lista suspensa. O DTS configura automaticamente as definições de conexão.
NotaNo console do DMS, esse parâmetro se chama Select a DMS database instance.
Se a instância de banco de dados não estiver registrada ou se você não quiser usar uma instância registrada, configure manualmente as definições de conexão.
Database Type
Selecione PolarDB for MySQL.
Access Method
Selecione Alibaba Cloud Instance.
Instance Region
Selecione a região em que o cluster PolarDB for MySQL reside.
Replicate Data Across Alibaba Cloud Accounts
Neste tutorial, selecione No.
ImportanteSe você precisar acessar recursos do banco de dados de origem entre contas (selecionando Yes), configure a autorização RAM para a conta Alibaba Cloud usada para criar a tarefa DTS. Também é necessário inserir a Alibaba Cloud Account e o RAM Role Name. Para obter instruções, consulte Configure RAM authorization for cross-account tasks.
PolarDB Cluster ID
Selecione o ID do cluster PolarDB for MySQL.
Database Account
Insira a conta somente leitura do banco de dados PolarDB for MySQL ou uma conta personalizada com as permissões REPLICATION CLIENT, REPLICATION SLAVE, SHOW VIEW e SELECT.
Database Password
A senha usada para acessar a instância de banco de dados.
Encryption
Selecione uma opção com base nos seus requisitos. Para obter mais informações sobre criptografia SSL, consulte Enable SSL encryption.
Consumer Network Type
Network Type
O parâmetro Network Type tem valor fixo VPC. Você deve selecionar uma VPC e um vSwitch. Para obter mais informações, consulte VPCs.
NotaDepois de configurar uma tarefa de rastreamento de alterações, você não poderá alterar as configurações da seção Consumer Network Type.
Se o cliente de rastreamento de alterações estiver implantado em uma VPC, recomendamos selecionar a mesma VPC e o mesmo vSwitch conectados ao cliente.
Se você rastrear alterações de dados por redes internas, a latência de rede será mínima.
-
Na parte inferior da página, clique em Test Connectivity and Proceed.
NotaCertifique-se de que os blocos CIDR dos servidores DTS possam ser adicionados automática ou manualmente às configurações de segurança dos bancos de dados de origem e de destino para permitir o acesso dos servidores DTS. Para obter mais informações, consulte Whitelist DTS server IP addresses.
-
Configure os objetos para rastreamento de alterações.
-
Na página Configure Objects, configure os objetos para rastreamento de alterações.
Parâmetro
Descrição
Data Change Types
Data Change Types vem selecionado por padrão e não pode ser alterado.
Data Update
O DTS rastreia atualizações de dados dos objetos selecionados, incluindo as operações INSERT, DELETE e UPDATE.
Schema Update
O DTS rastreia as operações de criação, exclusão e modificação em todos os esquemas de objeto da instância de origem. Use o cliente de rastreamento de alterações para filtrar os dados que você deseja rastrear.
Source Objects
Selecione um ou mais objetos na seção Source Objects e clique no ícone
para adicionar os objetos à seção Selected Objects. NotaVocê pode selecionar tabelas ou bancos de dados como objetos para rastreamento de alterações.
Se você selecionar um banco de dados como objeto, o DTS rastreará os dados incrementais de todos os objetos, incluindo novos objetos no banco de dados.
Se você selecionar uma tabela como objeto, o DTS rastreará somente os dados incrementais dessa tabela. Nesse caso, para rastrear alterações de dados de outra tabela, adicione a tabela à lista de objetos. Para obter mais informações, consulte Modify the objects for change tracking.
-
Clique em Next: Advanced Settings para configurar as definições avançadas.
Parâmetro
Descrição
Dedicated Cluster for Task Scheduling
Por padrão, o DTS agenda a tarefa em um cluster compartilhado. Não é necessário configurar esse parâmetro. Você pode comprar clusters dedicados com especificações definidas para executar tarefas de rastreamento de alterações do DTS. Para obter mais informações, consulte What is a DTS dedicated cluster?.
Retry Time for Failed Connections
O intervalo de repetição para conexões com falha. Se a tarefa de rastreamento de alterações falhar, o DTS tentará reconectar imediatamente dentro desse intervalo. Valores válidos: 10 a 1440. Unidade: minutos. Valor padrão: 720. Recomendamos definir o parâmetro como um valor maior que 30. Se o DTS se reconectar à instância de banco de dados de origem dentro do intervalo especificado, ele retomará a tarefa de rastreamento de alterações. Caso contrário, a tarefa falhará.
NotaSe você configurar várias tarefas de rastreamento de alterações para uma instância de banco de dados, o menor intervalo de repetição terá precedência. Por exemplo, a Tarefa A e a Tarefa B estão configuradas para a mesma instância de banco de dados. A Tarefa A tem um intervalo de repetição de 30 minutos, e a Tarefa B tem um intervalo de 60 minutos. Nesse caso, o intervalo de 30 minutos terá precedência.
Quando o DTS tenta reconectar, ele cobra taxas. Recomendamos especificar o intervalo de repetição com base nos seus requisitos de negócio ou liberar a instância DTS assim que possível após liberar a instância de banco de dados de origem.
Retry Time for Other Issues
O intervalo de repetição para outros problemas. Por exemplo, se operações DDL ou DML falharem após o início da tarefa de rastreamento de alterações, o DTS repetirá imediatamente as operações dentro do intervalo de repetição. Valores válidos: 1 a 1440. Unidade: minutos. Valor padrão: 10. Recomendamos definir o parâmetro como um valor maior que 10. Se as operações com falha forem concluídas com êxito dentro do intervalo de repetição especificado, o DTS retomará a tarefa de rastreamento de alterações. Caso contrário, a tarefa falhará.
ImportanteO valor do parâmetro Retry Time for Other Issues deve ser menor que o valor do parâmetro Retry Time for Failed Connections.
Environment Tag
Selecione uma tag de ambiente para identificar a instância. Este exemplo não exige tag.
Whether to delete SQL operations on heartbeat tables of forward and reverse tasks
Escolha se o DTS deve gravar informações SQL de heartbeat no banco de dados de origem quando a instância DTS estiver em execução.
-
Yes: o DTS não grava informações SQL de heartbeat no banco de dados de origem. Isso pode fazer com que a instância DTS reporte atraso.
-
No: grava informações SQL de heartbeat no banco de dados de origem. Isso pode interferir em recursos como backup físico e clonagem do banco de dados de origem.
Monitoring and Alerting
Especifica se os alertas devem ser ativados para a tarefa de rastreamento de alterações. Se os alertas estiverem configurados e a tarefa falhar ou a latência exceder o limiar, o DTS enviará notificações de alerta. Valores válidos:
No: não ativa alertas.
Yes: ativa alertas. Nesse caso, você também deve configurar o limiar de alerta e os configurações de notificação de alerta. Para obter mais informações, consulte Configure alerts during instance configuration.
-
-
Na parte inferior da página, clique em Next: Save Task Settings and Precheck.
Para visualizar os parâmetros que você deve especificar ao chamar a operação de API relevante para configurar a tarefa DTS, mova o ponteiro sobre Next: Save Task Settings and Precheck e clique em Preview OpenAPI parameters.
Se não precisar visualizar os parâmetros ou já os tiver visualizado, clique em Next: Save Task Settings and Precheck na parte inferior da página.
NotaAntes de iniciar a tarefa de rastreamento de alterações, o DTS executa uma pré-verificação. Inicie a tarefa de rastreamento de alterações somente depois que ela passar na pré-verificação.
Se a tarefa não passar na pré-verificação, clique em View Details ao lado de cada item com falha. Depois de solucionar os problemas com base na mensagem de erro, execute a pré-verificação novamente.
-
Se um alerta for gerado para um item durante a pré-verificação, execute as seguintes operações conforme o cenário:
Se um item de alerta não puder ser ignorado, clique em View Details ao lado do item com falha e solucione os problemas. Em seguida, execute a pré-verificação novamente.
Se você puder ignorar o item de alerta, clique em Confirm Alert Details. Na caixa de diálogo View Details, clique em Ignore. Na mensagem exibida, clique em OK. Depois, clique em Precheck Again para executar a pré-verificação novamente. Se você ignorar o item de alerta, poderá ocorrer inconsistência de dados e seu negócio poderá ficar exposto a possíveis riscos.
-
Compre a instância.
Aguarde até que Success Rate se torne 100%. Em seguida, clique em Next: Purchase Instance.
-
Na página Purchase, especifique o método de faturamento da instância de rastreamento de alterações. A tabela a seguir descreve os parâmetros.
Parâmetro
Descrição
Método de faturamento
Assinatura: você paga pela assinatura ao criar uma instância. Para uso de longo prazo, o método de faturamento por assinatura é mais econômico que o método de pagamento conforme o uso. Quanto maior a duração da assinatura, menores os preços oferecidos.
Pagamento conforme o uso: uma instância de pagamento conforme o uso é faturada por hora. Recomendamos selecionar esse método de faturamento para uso de curto prazo. Se uma instância de pagamento conforme o uso não for mais necessária, libere-a para reduzir custos.
Resource Group Settings
O grupo de recursos ao qual a instância pertence. Valor padrão: default resource group. Para obter mais informações, consulte What is resource management?
Subscription Duration
Se você selecionar o método de faturamento por assinatura, defina a duração da assinatura e o número de instâncias que deseja criar. A duração da assinatura pode ser de um a nove meses, um ano, dois anos, três anos ou cinco anos.
NotaEsse parâmetro fica disponível somente se você selecionar o método de faturamento Subscription.
Leia e selecione os Data Transmission Service (Pay-as-you-go) Service Terms.
Clique em Buy and Start para iniciar a tarefa de rastreamento de alterações. Você pode visualizar o progresso da tarefa na lista de tarefas.
Próximas etapas
Quando a tarefa de assinatura estiver em execução, crie um consumer group e escolha um método de consumo de dados para o cliente.