Data Transmission Service:Sincronizar dados do PolarDB for MySQL para o PolarDB-X 1,0

Pré-requisitos

• Crie uma instância PolarDB-X 1,0 de destino. O espaço de armazenamento da instância de destino deve ser maior do que o espaço utilizado pelo cluster PolarDB for MySQL de origem. Para mais informações, consulte Create a PolarDB-X 1.0 instance.

  Nota

  Ao criar a instância, defina o parâmetro Storage Class como RDS MySQL.

• Crie um banco de dados e tabelas na instância PolarDB-X 1,0 de destino. Para mais informações, consulte Create a database e Perform basic SQL operations.

Observações

Faturamento

Operações SQL incrementais suportadas

Permissões da conta de banco de dados

Procedimento

1. Acesse a página de lista de tarefas de sincronização da região de destino. Use um dos dois métodos a seguir:

   From the DTS console

   1. Faça login no Data Transmission Service (DTS) console.

   2. No painel de navegação à esquerda, clique em Data Synchronization.

   3. No canto superior esquerdo da página, selecione a região onde a instância de sincronização está localizada.

   From the DMS console

   Nota

   As operações reais podem variar de acordo com o modo e o layout do console DMS. Para mais informações, consulte Simple mode e Customize the layout and style of the DMS interface.

   1. Faça login no Data Management (DMS).

   2. Na barra de menu superior, escolha Data + AI > Data Transmission (DTS) > Data Synchronization.

   3. À direita de Data Synchronization Tasks, selecione a região onde a instância de sincronização está localizada.

2. À direita de Data Synchronization Tasks, selecione a região onde a instância de sincronização está localizada.

3. Clique em Create Task para abrir a página de configuração da tarefa.

4. Opcional: No canto superior direito da página, clique em New Configuration Page.

   Nota

   • Se o botão no canto superior direito for Back to Previous Version, ignore esta etapa.

   • As páginas de configuração nova e antiga possuem parâmetros diferentes. Recomenda-se usar a nova página de configuração.

5. Configure os bancos de dados de origem e de destino.

   Category	Configuration	Description
   N/A	Task Name	O DTS gera automaticamente um nome para a tarefa. Recomenda-se especificar um nome descritivo para facilitar a identificação. O nome não precisa ser exclusivo.
   Source Database	Select a DMS database instance.	Selecione uma instância existente conforme necessário. Ao usar uma instância existente, as informações do banco de dados são preenchidas automaticamente, sem necessidade de inserção manual. Caso não use uma instância existente, configure as informações do banco de dados a seguir. Nota No console DMS, clique em Add DMS Database Instance para adicionar uma instância de banco de dados. Para mais informações, consulte Add a cloud database instance e Add a database instance from another cloud or a self-managed database. No console DTS, adicione um banco de dados ao DTS na página Database Connections ou na nova página de configuração. Para mais informações, consulte Data Connection Management.
   	Database Type	Selecione PolarDB for MySQL.
   	Access Method	Selecione Alibaba Cloud Instance.
   	Instance Region	Selecione a região onde o cluster PolarDB for MySQL de origem está localizado.
   	Replicate Data Across Alibaba Cloud Accounts	Este exemplo utiliza uma instância de banco de dados pertencente à conta Alibaba Cloud atual. Selecione No.
   	PolarDB Cluster ID	Selecione o ID do cluster PolarDB for MySQL de origem.
   	Database Account	Insira a conta de banco de dados do cluster PolarDB for MySQL de origem. Para informações sobre as permissões necessárias, consulte Database account permissions.
   	Database Password	Insira a senha correspondente à conta de banco de dados.
   	Encryption	Selecione um método de conexão conforme necessário. Para mais informações sobre o recurso de criptografia Secure Sockets Layer (SSL), consulte Configure SSL encryption.
   Destination Database	Select a DMS database instance.	Selecione uma instância existente conforme necessário. Ao usar uma instância existente, as informações do banco de dados são preenchidas automaticamente, sem necessidade de inserção manual. Caso não use uma instância existente, configure as informações do banco de dados a seguir. Nota No console DMS, clique em Add DMS Database Instance para adicionar uma instância de banco de dados. Para mais informações, consulte Add a cloud database instance e Add a database instance from another cloud or a self-managed database. No console DTS, adicione um banco de dados ao DTS na página Database Connections ou na nova página de configuração. Para mais informações, consulte Data Connection Management.
   	Database Type	Selecione PolarDB-X 1.0.
   	Access Method	Selecione Alibaba Cloud Instance.
   	Instance Region	Selecione a região onde a instância PolarDB-X 1,0 de destino está localizada.
   	Instance ID	Selecione o ID da instância PolarDB-X 1,0 de destino.
   	Database Account	Insira a conta de banco de dados da instância PolarDB-X 1,0 de destino. Para informações sobre as permissões necessárias, consulte Database account permissions.
   	Database Password	Insira a senha correspondente à conta de banco de dados.

6. Após concluir a configuração, clique em Test Connectivity and Proceed na parte inferior da página.

   Se o banco de dados de origem ou de destino for uma instância de banco de dados Alibaba Cloud — como uma instância RDS for MySQL ou uma instância ApsaraDB for MongoDB —, o DTS adiciona automaticamente os endereços ip dos servidores DTS da região correspondente à lista de permissões da instância. Se o banco de dados de origem ou de destino for um banco de dados autogerenciado hospedado em uma instância ECS, o DTS adiciona automaticamente esses endereços ip às regras de segurança da instância ECS. Certifique-se também de que o banco de dados autogerenciado permite acesso a partir da instância ECS. Se o banco de dados estiver implantado em um cluster com múltiplas instâncias ECS, adicione manualmente os endereços ip dos servidores DTS às regras de segurança de cada instância ECS. Se o banco de dados de origem ou de destino for autogerenciado em um IDC ou proveniente de outro provedor de cloud, adicione manualmente os endereços ip dos servidores DTS da região correspondente para permitir o acesso. Para mais informações sobre os endereços ip dos servidores DTS, consulte IP address CIDR blocks of DTS servers.

   Aviso

   Adicionar os blocos CIDR de ip público dos servidores DTS, seja de forma automática ou manual, pode representar riscos de segurança. Ao usar este product, você reconhece e aceita esses riscos potenciais. Implemente proteções básicas de segurança, incluindo, entre outras: reforço da segurança de senhas, restrição de portas abertas para blocos CIDR, uso de autenticação nas comunicações internas via API e revisão e restrição periódica de blocos CIDR desnecessários. Como alternativa, conecte-se ao banco de dados por uma rede interna, como uma linha dedicada, um VPN Gateway ou um Smart Access Gateway.

7. Configure os objetos da tarefa.

   1. Na página Configure Objects, configure os objetos a sincronizar.

      Configuration	Description
      Synchronization Types	Incremental Data Synchronization está selecionada. Você só pode selecionar Full Data Synchronization. O recurso Schema Synchronization não é suportado. Após a conclusão da verificação prévia, o DTS sincroniza os dados dos objetos selecionados da instância de origem para o cluster de destino. Esses dados servem como baseline para a sincronização incremental subsequente.
      Processing Mode of Conflicting Tables	Precheck and Report Errors: Verifica se existe uma tabela com o mesmo nome no banco de dados de destino. Se não existir, a verificação prévia é aprovada. Se existir, ela falha e a tarefa de sincronização não é iniciada. Nota Se não for possível excluir ou renomear a tabela com o mesmo nome no banco de dados de destino, mapeie-a para um nome diferente. Para mais informações, consulte Map table and column names. Ignore Errors and Proceed: Ignora a verificação de nomes de tabelas duplicados no banco de dados de destino. Aviso Selecionar Ignore Errors and Proceed pode causar inconsistência de dados e colocar seu negócio em risco. Por exemplo: Se os schemas das tabelas forem iguais e um registro no banco de dados de destino tiver o mesmo valor de chave primária ou chave exclusiva que um registro no banco de dados de origem: Durante a sincronização completa, o DTS mantém o registro no cluster de destino. O registro correspondente do banco de dados de origem não é sincronizado. Durante a sincronização incremental, o registro do banco de dados de origem sobrescreve o registro no banco de dados de destino. Se os schemas das tabelas forem diferentes, a sincronização inicial de dados poderá falhar, resultando em sincronização parcial de dados de coluna ou em falha completa. Prossiga com cautela.
      Capitalization of Object Names in Destination Instance	Configure a política de distinção entre maiúsculas e minúsculas para os nomes de objetos de banco de dados, tabela e coluna sincronizados para a instância de destino. Por padrão, a política DTS default policy está selecionada. Também é possível usar as políticas padrão dos bancos de dados de origem e de destino. Para mais informações, consulte Case sensitivity policy for destination object names.
      Source Objects	Na caixa Source Objects, clique em um objeto a sincronizar e, em seguida, clique em para movê-lo para a caixa Selected Objects. Nota É possível selecionar objetos a sincronizar no nível de tabela.
      Selected Objects	Para renomear um único objeto de sincronização na instância de destino, clique com o botão direito no objeto na caixa Selected Objects. Para mais informações sobre como renomear objetos, consulte Map a single database, table, or column. Para alterar os nomes de múltiplos objetos de sincronização na instância de destino em lote, clique em Batch Edit no canto superior direito da caixa Selected Objects. Para mais informações, consulte Map databases, tables, and columns in a batch. Nota Para filtrar dados, clique com o botão direito na tabela a ser sincronizada na caixa Selected Objects e defina uma condição de filtro na caixa de diálogo exibida. Para mais informações sobre como definir uma condição de filtro, consulte Configure filter conditions. Ao usar o recurso de mapeamento de nomes de objetos, a sincronização de outros objetos que dependem do objeto mapeado pode falhar.

   2. Clique em Next: Advanced Settings para configurar os parâmetros avançados.

      Configuration	Description
      Dedicated Cluster for Task Scheduling	Por padrão, o DTS agenda as tarefas em um cluster compartilhado, sem necessidade de seleção. Para obter um desempenho mais estável, adquira um cluster dedicado para executar as tarefas de sincronização DTS. Para mais informações, consulte What is a DTS dedicated cluster?.
      Retry Time for Failed Connections	Após o início de uma tarefa de sincronização, se a conexão com o banco de dados de origem ou de destino falhar, o DTS reporta um erro e inicia imediatamente as tentativas de reconexão. A duração padrão de nova tentativa é de 720 minutos. Também é possível especificar uma duração personalizada de 10 a 1.440 minutos. Recomenda-se definir uma duração de 30 minutos ou mais. Se o DTS conseguir se reconectar ao banco de dados dentro do período especificado, a tarefa de sincronização é retomada automaticamente. Caso contrário, a tarefa falha. Nota Se você tiver múltiplas instâncias DTS (por exemplo, a Instância A e a Instância B) que compartilham a mesma origem ou destino, e definir o tempo de nova tentativa de rede como 30 minutos para a Instância A e 60 minutos para a Instância B, o menor valor — 30 minutos — será aplicado a ambas. Como o DTS cobra pelo tempo de execução da tarefa durante o período de nova tentativa de conexão, recomenda-se personalizar a duração com base nas necessidades do negócio ou liberar a instância DTS assim que possível após as instâncias de banco de dados de origem e de destino forem liberadas.
      Retry Time for Other Issues	Após o início da tarefa de sincronização, se ocorrerem outros problemas não relacionados a conectividade no banco de dados de origem ou de destino (como exceções na execução de DDL ou DML), o DTS reporta um erro e inicia operações de nova tentativa contínua. A duração padrão de nova tentativa é de 10 minutos. Também é possível personalizar a duração entre 1 e 1.440 minutos. Recomenda-se definir 10 minutos ou mais. Se as operações relevantes forem bem-sucedidas dentro do período configurado, a tarefa de sincronização é retomada automaticamente. Caso contrário, a tarefa falha. Importante O valor de Retry Time for Other Issues deve ser menor do que o de Retry Time for Failed Connections.
      Enable Throttling for Full Data Synchronization	Durante a fase de sincronização completa, o DTS consome recursos de leitura e gravação dos bancos de dados de origem e de destino, o que pode aumentar a carga sobre eles. Para reduzir essa carga, defina um limite de taxa para a tarefa de sincronização completa configurando os parâmetros Queries per second (QPS) to the source database, RPS of Full Data Migration e Data migration speed for full migration (MB/s). Nota Este item de configuração está disponível apenas quando Synchronization Types estiver definido como Full Data Synchronization. Também é possível adjust the full synchronization rate após a instância de sincronização estar em execução.
      Enable Throttling for Incremental Data Synchronization	Também é possível definir um limite de taxa para a tarefa de sincronização incremental. Para aliviar a pressão sobre o banco de dados de destino, configure os parâmetros RPS of Incremental Data Synchronization e Data synchronization speed for incremental synchronization (MB/s).
      Environment Tag	Selecione uma tag de ambiente para identificar a instância conforme necessário. Neste exemplo, nenhuma tag é selecionada.
      Whether to delete SQL operations on heartbeat tables of forward and reverse tasks	Escolha se deseja gravar informações de heartbeat SQL no banco de dados de origem durante a execução da instância DTS. Yes: As informações de heartbeat SQL não são gravadas no banco de dados de origem. Isso pode fazer com que a instância DTS reporte um atraso. No: Grava informações de heartbeat SQL no banco de dados de origem. Isso pode interferir em recursos como backup físico e clonagem do banco de dados de origem.
      Configure ETL	Escolha se deseja ativar o recurso de extração, transformação e carga (ETL). Para mais informações, consulte What is ETL?. Valores válidos: Yes: Ativa o recurso ETL. Insira as instruções de processamento de dados no editor de código. Para mais informações, consulte Configure ETL in a data migration or data synchronization task. No: Desativa o recurso ETL.
      Monitoring and Alerting	Especifique se deseja configurar alertas. Se a sincronização falhar ou a latência exceder o limiar especificado, uma notificação é enviada ao contato de alerta. No: Nenhum alerta é configurado. Yes: Configure alertas definindo um limiar e especificando um alert notification. Para mais informações, consulte Configure monitoring and alerting during task configuration.

8. Salve a tarefa e execute uma verificação prévia.

   • Para visualizar os parâmetros da API para configurar esta instância, passe o cursor sobre o botão Next: Save Task Settings and Precheck e clique em Preview OpenAPI parameters no balão exibido.

   • Após visualizar os parâmetros da API, clique em Next: Save Task Settings and Precheck na parte inferior da página.

   Nota

   • Antes de iniciar o job de sincronização, o DTS executa uma verificação prévia. O job só pode iniciar após todos os itens da verificação serem aprovados.

   • Se a verificação prévia falhar, clique em View Details no item com falha. Corrija o problema conforme indicado e execute a verificação prévia novamente.

   • Se a verificação prévia retornar um aviso:

     • Se um item de verificação falhar e não puder ser ignorado, clique em View Details ao lado do item. Siga as instruções para corrigir o problema e execute a verificação prévia novamente.

     • Para itens que podem ser ignorados, clique em Confirm Alert Details, Ignore, OK e Precheck Again em sequência para ignorar o aviso e executar a verificação novamente. Ao optar por suprimir o item de aviso, podem ocorrer problemas como inconsistência de dados, representando riscos ao negócio.

9. Quando o Success Rate atingir 100%, clique em Next: Purchase Instance.

10. Adquira a instância.

    1. Na página Purchase, selecione o método de faturamento e a especificação de link para a instância de sincronização de dados. A tabela a seguir descreve esses parâmetros em detalhes.

       Category	Parameter	Description
       New Instance Class	Billing Method	Assinatura: o pagamento é efetuado na criação da instância. Indicado para necessidades de longo prazo e mais econômico do que o pagamento conforme o uso. Quanto maior o período de assinatura, maior o desconto. Pagamento conforme o uso: cobrança por hora. Mais adequado para necessidades de curto prazo. Libere a instância imediatamente após o uso para reduzir custos.
       	Resource Group Configuration	O grupo de recursos ao qual a instância pertence. O padrão é o grupo de recursos default. Para mais informações, consulte What is Resource Management?.
       	Link Specification	O DTS oferece especificações de sincronização com diferentes níveis de desempenho. A especificação de link afeta a taxa de sincronização. Escolha uma especificação com base no seu cenário de negócios. Para mais informações, consulte Data synchronization link specifications.
       	Subscription Duration	No modo de assinatura, selecione a duração e a quantidade da instância. As opções de assinatura mensal variam de 1 a 9 meses; as anuais abrangem 1, 2, 3 ou 5 anos. Nota Esta opção está disponível apenas quando o método de faturamento for Subscription.

    2. Após concluir a configuração, leia e selecione Data Transmission Service (Pay-as-you-go) Service Terms.

    3. Clique em Buy and Start. Na caixa de diálogo OK, clique em OK.

       Acompanhe o progresso da tarefa na página Data Synchronization.