Présentation
LakeHouse Migration
LakeHouse Migration (LHM) est la solution propriétaire tout-en-un d'Alibaba Cloud, conçue pour orchestrer et simplifier la migration de bout en bout des plateformes de données entre différentes plateformes cloud et environnements sur site. LHM offre une suite complète de fonctionnalités, comprenant la découverte de clusters multi-moteurs, la synchronisation incrémentielle des métadonnées, la migration de lacs de données à grande échelle, la réplication de données structurées, la traduction automatisée du SQL et des workflows, ainsi que la vérification des données. Suivez les tâches de synchronisation et surveillez les écarts entre plateformes en temps réel grâce à un tableau de bord intuitif pour orchestrer visuellement la migration de l'ensemble de votre pile technologique lakehouse.
Accélérez votre migration vers Alibaba Cloud avec LHM
- Obtenez une évaluation complète et détaillée de l'ensemble de votre environnement lakehouse. Nous cataloguons toutes les ressources, du stockage aux ressources de calcul, en passant par les schémas de métadonnées et les instances d'exécution, afin de fournir une base factuelle pour votre migration. Le système identifie avec précision les modifications du cluster source grâce à des comparaisons périodiques de l'ensemble des ressources et à une surveillance en temps réel des changements incrémentaux de métadonnées. Votre plan de migration reste ainsi toujours à jour.
- Facilite la migration des métadonnées, des données et des fichiers de stockage lakehouse entre clusters, avec une gestion intégrée des tâches, une observabilité complète et des rapports tout au long du processus de migration.
- Prend en charge la migration automatisée des tâches SQL depuis plus de 10 moteurs lakehouse hétérogènes vers Alibaba Cloud. Le système convertit le SQL OLAP et entrepôt de données, analyse le lignage de tables et le contexte, puis génère des stratégies d'optimisation pour améliorer la compatibilité et les performances d'exécution.
- Prend en charge la migration de bout en bout depuis les plateformes big data source vers les moteurs d'ordonnancement Alibaba Cloud. Cela inclut la conversion des workflows, des nœuds multi-types et des ressources issus de moteurs open source ou propriétaires, avec une définition flexible des règles de conversion.
- Fournit une validation des données complète et multicouche pour les comparaisons bilatérales. Plusieurs méthodes sont disponibles : comptage d'enregistrements, métriques, comparaison ligne par ligne, SQL personnalisé et contrôle du taux de valeurs nulles, le tout accompagné de rapports visuels détaillés pour une analyse approfondie.
- Grâce à la visualisation du lignage de données et des flux tout au long du cycle de vie, les utilisateurs peuvent rapidement identifier les causes profondes, retracer les anomalies de qualité et garantir la conformité et l'auditabilité des données.
Étude de cas
Mekari
En tant que premier fournisseur SaaS d'Indonésie, Mekari propose des solutions de gestion d'entreprise alimentées par le cloud, au service de plus de 35 000 entreprises et d'un million d'utilisateurs depuis sa création en 2015. Grâce à une alliance stratégique avec Alibaba Cloud, Mekari a réalisé des améliorations opérationnelles significatives : une augmentation de 50 % des performances de service, portée par une intégration qui a décuplé l'efficacité des workflows et amélioré l'expérience utilisateur ; une réduction de 30 % des coûts d'exploitation, rendue possible par l'optimisation des dépenses du modèle tarifaire flexible d'Alibaba Cloud ; et une baisse massive de 60 % de la latence grâce à l'utilisation de centres de données locaux, offrant un accès client plus rapide, un traitement des requêtes ultra-rapide et une expérience utilisateur globalement transformée.
Documentation
Gestion des sources de données
Les sources de données définissent les connexions vers les différents systèmes de stockage big data, les clusters de calcul et les moteurs d'ordonnancement.
Conversion SQL
Modernisez votre pile analytique en convertissant automatiquement le code SQL de plus de dix moteurs hétérogènes de lac de données et d'entrepôt de données vers le SQL natif d'Alibaba Cloud. Notre moteur analyse le lignage de tables et le contexte pour générer des recommandations d'optimisation, améliorant ainsi la compatibilité et les performances des requêtes.
Vérification des données
Idéal pour un large éventail de scénarios : intégration de données, migration de plateforme, validation lors de la refonte des tâches, exécutions en parallèle et vérifications de préparation avant la bascule.
Migration de workflow
Migrez vos workflows de manière transparente depuis les moteurs d'ordonnancement open source et autres moteurs cloud vers DataWorks.
