Visão geral
LakeHouse Migration
O LakeHouse Migration (LHM) é uma solução proprietária e completa do Alibaba Cloud, desenvolvida para orquestrar e simplificar a migração de ponta a ponta de plataformas de dados entre diferentes nuvens e ambientes locais. O LHM oferece uma solução completa de recursos, englobando desde a descoberta de clusters multimecanismos e sincronização incremental de metadados até a migração de data lakes em larga escala. A solução também realiza a replicação de dados estruturados, tradução automatizada de SQL e fluxo de dados, além de verificação de dados. Acompanhe em tempo real as tarefas de sincronização e os desvios da plataforma usando um painel intuitivo para orquestrar visualmente a migração de toda a sua infraestrutura tecnológica de Lakehouse.
Acelere a migração do Alibaba Cloud com o LHM
- Realize uma avaliação completa e detalhada de todo o ambiente do Lakehouse. Catalogamos tudo, desde recursos de armazenamento e computação até esquemas de metadados e instâncias de execução, para fornecer uma base orientada a dados para a sua migração. Identifica com precisão as alterações no cluster de origem por meio de comparações periódicas de diferenças de todos os ativos e do monitoramento em tempo real de mudanças incrementais de metadados. Assim, seu plano de migração permanece sempre atualizado.
- Simplifica a migração de dados, metadados e arquivos do Lakehouse entre clusters, combinando gerenciamento de tarefas, observabilidade e geração de relatórios em todo o processo.
- É compatível com a migração automatizada de tarefas SQL de mais de 10 mecanismos de Lakehouse heterogêneos para Alibaba Cloud. Converte OLAP e Data Warehouse SQL, analisa a linhagem e o contexto da tabela e gera estratégias de otimização para aprimorar a compatibilidade e o desempenho da execução.
- Aceita a migração de ponta a ponta de plataformas de Big Data de origem para os mecanismos de agendamento Alibaba Cloud. O processo abrange a conversão de fluxos de trabalho, nós de múltiplos tipos e recursos de mecanismos de código aberto ou proprietários, contando com uma definição flexível de regras de conversão.
- Oferece validação de dados abrangente e em várias camadas para comparações de ponta a ponta. A solução proporciona vários métodos, incluindo contagem de registros, indicadores, comparação de linhas completas, SQL personalizado e verificações de taxa de nulos, além de relatórios visuais detalhados para análises aprofundadas.
- A visualização da linhagem e do fluxo dos dados em todo o seu ciclo de vida permite aos usuários identificar rapidamente causas raiz, rastrear anomalias de qualidade e garantir conformidade e auditabilidade.
Estudo de caso
Mekari
A Mekari, principal provedora de SaaS da Indonésia, fornece soluções para gerenciamento de negócios em nuvem. Fundada em 2015, a empresa já atende a mais de 35 mil organizações e supera a marca de um milhão de usuários. Por meio de uma aliança estratégica com Alibaba Cloud, a Mekari alcançou melhorias operacionais expressivas: um ganho de 50% no desempenho dos serviços por meio de fluxos de trabalho otimizados; economia de 30% nos custos operacionais graças à flexibilidade de preços da nuvem; e uma redução massiva de 60% na latência com o uso de data centers locais. Isso resultou no acesso mais rápido para os clientes, processamento de consultas extremamente veloz e no extraordinário aprimoramento da experiência geral do usuário.
Documentação
Gerenciamento de fonte de dados
As fontes de dados estabelecem conexões com diversos sistemas de armazenamento de Big Data, clusters computacionais e mecanismos de agendamento.
Conversão de SQL
Atualize sua infraestrutura de analytics migrando de forma automatizada o SQL de mais de dez bancos de dados e data lakes heterogêneos para o SQL nativo do Alibaba Cloud. Aumente o desempenho e a compatibilidade das consultas com nosso mecanismo que, por meio da análise de contexto e linhagem das tabelas, gera recomendações de otimização.
Verificação de dados
Ideal para diversos cenários, como integração de dados, migração de plataformas, validação de refatoração de tarefas, execuções em paralelo e verificações de prontidão pré-implantação.
Migração do fluxo de trabalho
Migre facilmente os fluxos de trabalho para o DataWorks a partir de mecanismos de agendamento de código ou na nuvem.
