Data Transmission Service:Migrar dados do PolarDB-X 2.0 para o ApsaraDB for SelectDB

Tabelas com engine Unique

Todas as chaves únicas na tabela de destino com engine Unique devem existir na tabela de origem e estar incluídas nos objetos a serem migrados. Caso contrário, poderá ocorrer inconsistência de dados.

Tabelas com engine Duplicate

Quando a tabela de destino é uma tabela com engine Duplicate, o DTS converte instruções UPDATE e DELETE em instruções INSERT. Registros duplicados podem aparecer nos seguintes cenários:

• A instância de migração é submetida a nova tentativa ou reiniciada.

• Os mesmos dados são modificados por operações DML duas ou mais vezes após o início da instância de migração.

Para remover duplicidades dos registros, use as colunas adicionais criadas automaticamente pelo DTS: _is_deleted, _version e _record_id. Consulte Colunas adicionais.

Etapa 1: Acessar a página Data Migration

Use um dos métodos a seguir:

Console do DTS

1. Faça login no console do DTS.

2. No painel de navegação à esquerda, clique em Data Migration.

3. No canto superior esquerdo, selecione a região onde a instância de migração reside.

Console do DMS

As etapas reais podem variar dependendo do modo e layout do console do DMS. Consulte Modo simples e Personalizar o layout e o estilo do console do DMS .

1. Faça login no console do DMS.

2. Na barra de navegação superior, mova o ponteiro sobre Data + AI > DTS (DTS) > Data Migration.

3. Na lista suspensa à direita de Data Migration Tasks, selecione a região onde a instância de migração reside.

Etapa 2: Configurar os bancos de dados de origem e destino

1. Clique em Create Task.

2. Configure os parâmetros descritos na tabela a seguir.

   Categoria	Parâmetro	Descrição
   N/A	Task Name	Nome da tarefa DTS. O DTS gera um nome padrão. Especifique um nome informativo que facilite a identificação da tarefa. O nome não precisa ser único.
   Source Database	Select Existing Connection	Se a instância de origem estiver registrada no DTS, selecione-a na lista suspensa. O DTS preenche automaticamente os parâmetros restantes. Caso contrário, configure os parâmetros manualmente. No console do DMS, selecione a instância em Select a DMS database instance.
   	Database Type	Selecione PolarDB-X 2.0.
   	Access Method	Selecione Alibaba Cloud Instance.
   	Instance Region	Selecione a região onde a instância PolarDB-X 2.0 de origem reside.
   	Replicate Data Across Alibaba Cloud Accounts	Selecione No se as instâncias de origem e destino pertencerem à mesma conta Alibaba Cloud.
   	Instance ID	Selecione o ID da instância PolarDB-X 2.0 de origem.
   	Database Account	Insira a conta do banco de dados. Consulte Permissões necessárias para ver as permissões mínimas exigidas.
   	Database Password	Insira a senha da conta do banco de dados.
   Destination Database	Select Existing Connection	Se a instância de destino estiver registrada no DTS, selecione-a na lista suspensa. O DTS preenche automaticamente os parâmetros restantes. Caso contrário, configure os parâmetros manualmente. No console do DMS, selecione a instância em Select a DMS database instance.
   	Database Type	Selecione SelectDB.
   	Access Method	Selecione Alibaba Cloud Instance.
   	Instance Region	Selecione a região onde a instância SelectDB de destino reside.
   	Replicate Data Across Alibaba Cloud Accounts	Selecione No se as instâncias de origem e destino pertencerem à mesma conta Alibaba Cloud.
   	Instance ID	Selecione o ID da instância SelectDB de destino.
   	Database Account	Insira a conta do banco de dados. Consulte Permissões necessárias para ver as permissões mínimas exigidas.
   	Database Password	Insira a senha da conta do banco de dados.

3. Clique em Test Connectivity and Proceed.

Etapa 3: Configurar objetos de migração

1. Na página Configure Objects, defina os seguintes parâmetros.

   Parâmetro	Descrição
   Migration Types	Selecione os tipos de migração conforme suas necessidades: <br>- Schema Migration + Full Data Migration: Migra apenas os dados existentes. Não grave novos dados na origem durante a migração. <br>- Schema Migration + Full Data Migration + Incremental Data Migration: Migra os dados existentes e mantém o destino sincronizado com as alterações contínuas. Use esta combinação para minimizar interrupções no serviço. <br><br>Se você pular a Schema Migration, crie tabelas com engine Unique ou Duplicate com a estrutura correta no SelectDB antes de iniciar a tarefa. Para mais detalhes, consulte Mapeamento de tipos de dados, Colunas adicionais e Modelo de dados.
   Processing Mode of Conflicting Tables	- Precheck and Report Errors: A pré-verificação falha se o destino contiver tabelas com os mesmos nomes da origem. Para resolver conflitos, use o mapeamento de nomes de objetos para renomear as tabelas migradas. Consulte Mapear nomes de objetos. <br>- Ignore Errors and Proceed: Ignora a pré-verificação para nomes de tabelas idênticos. Aviso Isso pode causar inconsistência de dados. Durante a migração completa, o DTS ignora registros conflitantes e mantém os dados existentes no destino. Durante a migração incremental, o DTS sobrescreve registros conflitantes. Se a origem e o destino tiverem esquemas diferentes, apenas colunas parciais serão migradas ou a tarefa poderá falhar.
   Capitalization of Object Names in Destination Instance	Política de uso de maiúsculas e minúsculas para nomes de bancos de dados, tabelas e colunas no destino. O padrão é DTS default policy. Consulte Especificar o uso de maiúsculas e minúsculas em nomes de objetos na instância de destino.
   Source Objects	Selecione os bancos de dados ou tabelas a serem migrados e clique em para movê-los para Selected Objects.
   Selected Objects	- Para renomear uma tabela no destino, clique com o botão direito nela e selecione uma opção de mapeamento de nomes de objetos. Consulte Mapear nomes de objetos. <br>- Para filtrar linhas, clique com o botão direito em uma tabela e especifique condições WHERE. Consulte Especificar condições de filtro. <br>- Para selecionar operações SQL específicas para um banco de dados ou tabela, clique com o botão direito no objeto e escolha as operações a serem incluídas. <br>- Se Schema Migration estiver selecionado, você só pode selecionar tabelas (não bancos de dados) como objetos de migração e deve definir o parâmetro bucket_count: clique com o botão direito em uma tabela, ative Enable Parameter Settings, defina Value como um número inteiro positivo (padrão: auto) e clique em OK. <br><br> Nota Renomear um objeto com o mapeamento de nomes de objetos pode fazer com que objetos dependentes falhem na migração.

2. Clique em Next: Advanced Settings e configure os seguintes parâmetros.

   Parâmetro	Descrição
   Dedicated Cluster for Task Scheduling	Por padrão, o DTS agenda a tarefa em um cluster compartilhado. Para melhorar a estabilidade da tarefa, adquira um cluster dedicado. Consulte O que é um cluster dedicado do DTS.
   Retry Time for Failed Connections	Tempo durante o qual o DTS tenta reconectar após falhas de conexão depois do início da tarefa. Intervalo válido: 10–1.440 minutos. Padrão: 720 minutos. Defina como mais de 30 minutos. Se o DTS reconectar dentro desse período, a tarefa será retomada. Caso contrário, a tarefa falhará. Nota Quando várias tarefas compartilham a mesma origem ou destino, o tempo de nova tentativa definido mais recentemente tem precedência. O DTS cobra pela instância durante a nova tentativa.
   Retry Time for Other Issues	Tempo durante o qual o DTS tenta novamente operações DDL ou DML com falha. Intervalo válido: 1–1.440 minutos. Padrão: 10 minutos. Defina como mais de 10 minutos. Deve ser menor que Retry Time for Failed Connections.
   Enable Throttling for Full Data Migration	Limita o throughput de leitura e gravação durante a migração completa para reduzir a carga em ambas as instâncias. Configure Queries per second (QPS) to the source database, RPS of Full Data Migration e Data migration speed for full migration (MB/s). Disponível apenas quando Full Data Migration estiver selecionado.
   Enable Throttling for Incremental Data Migration	Limita o throughput durante a migração incremental. Configure RPS of Incremental Data Migration e Data migration speed for incremental migration (MB/s). Disponível apenas quando Incremental Data Migration estiver selecionado.
   Whether to delete SQL operations on heartbeat tables of forward and reverse tasks	Controla se o DTS grava operações SQL de heartbeat na instância de origem. <br>- Yes: O DTS não grava operações de heartbeat. As informações de latência podem ficar imprecisas. <br>- No: O DTS grava operações de heartbeat. O backup físico e a clonagem da origem podem ser afetados.
   Environment Tag	Uma tag opcional para identificar a instância.
   Configure ETL	Define se o recurso de extração, transformação e carregamento (ETL) será ativado. Consulte O que é ETL? e Configurar ETL em uma tarefa de migração ou sincronização de dados.
   Monitoring and Alerting	Define se alertas serão recebidos quando a tarefa falhar ou a latência da migração exceder um limiar. Se Yes, configure o limiar de alerta e as configurações de notificação. Consulte Configurar monitoramento e alertas ao criar uma tarefa DTS.

3. (Opcional) Clique em Next: Configure Database and Table Fields. Para cada tabela a ser migrada, especifique Primary Key Column, Distribution Key e Engine.

   - Esta etapa está disponível apenas quando Schema Migration estiver selecionado. Defina Definition Status como All para visualizar todas as tabelas. - Primary Key Column suporta múltiplas colunas. Uma ou mais colunas de chave primária também podem ser selecionadas como Distribution Key . - Se uma tabela não tiver chave primária ou restrição UNIQUE, selecione duplicate para Engine . Caso contrário, a tarefa poderá falhar ou poderá ocorrer perda de dados.

Etapa 4: Executar a pré-verificação

Clique em Next: Save Task Settings and Precheck.

Para visualizar os parâmetros da API desta configuração antes de prosseguir, passe o mouse sobre Next: Save Task Settings and Precheck e clique em Preview OpenAPI parameters.

A tarefa deve passar na pré-verificação antes de poder ser iniciada.

Se um item da pré-verificação falhar, clique em View Details ao lado do item com falha, resolva o problema e clique em Precheck Again .

Se um alerta for acionado: se não puder ser ignorado, resolva-o e verifique novamente. Se puder ser ignorado com segurança, clique em Confirm Alert Details , clique em Ignore na caixa de diálogo, confirme e clique em Precheck Again . Ignorar alertas pode causar inconsistência de dados.

Etapa 5: Adquirir e iniciar a instância

1. Aguarde até que Success Rate atinja 100% e clique em Next: Purchase Instance.

2. Na página Purchase Instance, configure a instância.

   Seção	Parâmetro	Descrição
   New Instance Class	Resource Group	O grupo de recursos para a instância de migração. O padrão é default resource group. Consulte O que é Resource Management?
   	Instance Class	A classe da instância determina a velocidade da migração. Selecione uma classe com base nas suas necessidades. Consulte Classes de instância de instâncias de migração de dados.

3. Marque a caixa de seleção Data Transmission Service (Pay-as-you-go) Service Terms.

4. Clique em Buy and Start e, em seguida, clique em OK na caixa de diálogo de confirmação.

A tarefa aparece na página Data Migration. Acompanhe o progresso dela nessa página.

Se a tarefa não incluir migração incremental de dados, ela será interrompida automaticamente ao ser concluída. O Status mostrará Completed .

Se a tarefa incluir migração incremental de dados, ela será executada continuamente. O Status mostrará Running . A tarefa de migração incremental de dados nunca é interrompida ou concluída automaticamente.