DataWorks est une plateforme de données complète qui s'intègre aux services Big Data et IA tels que MaxCompute, E-MapReduce, Hologres, Realtime Compute for Apache Flink, AnalyticDB, StarRocks et PAI. Elle offre des capacités de bout en bout pour l'intégration, le développement, la gouvernance et l'analyse des données, adaptées aux architectures de données modernes, y compris les entrepôts de données, les lacs de données et les architectures lakehouse. S'appuyant sur les méthodologies éprouvées d'Alibaba Group en matière de Big Data depuis 2009, DataWorks aide les entreprises à gérer l'ensemble du cycle de vie des données et est utilisée par des milliers de clients dans les secteurs de la finance, du commerce de détail et de la fabrication pour piloter leur transformation numérique.
Fonctionnalités
DataWorks propose une suite de fonctionnalités puissantes pour rationaliser les flux de travail des données tout au long de leur cycle de vie. Ses capacités sont organisées en six modules principaux qui couvrent tous les aspects, de la modélisation et de l'intégration des données à la sécurité et à l'analyse.
|**Module principal**
|
**Fonctionnalités clés**
| | --- | --- | |
**Modélisation des données**
|
Concevez et gérez systématiquement des actifs d'entrepôt de données standardisés et réutilisables.
| |
**Intégration des données**
|
Activez la synchronisation des données en temps réel et hors ligne entre diverses sources, qu'elles soient dans le cloud ou sur site.
| |
**Data Studio**
|
Développez des tâches par lots, en continu et d'apprentissage automatique dans un IDE en ligne prenant en charge SQL, Spark et Python. Configurez des dépendances et des planifications de tâches complexes.
| |
**Gouvernance des actifs de données**
|
Gérez vos actifs de données grâce à des fonctionnalités telles que Data Quality, Data Map et Data Asset Management pour définir des règles de qualité, tracer la lignée des données et gérer votre catalogue de données.
| |
**Sécurité des données**
|
Assurez la conformité et la sécurité des données tout au long de leur cycle de vie avec des fonctionnalités telles que le masquage des données, le contrôle d'accès granulaire et l'audit de sécurité.
| |
**Analyse des données**
|
Effectuez des analyses interactives et obtenez des informations commerciales à l'aide d'outils tels que SQL Query et Smart Data Discovery. Générez des API de données hautes performances sans code pour une intégration transparente avec les applications.
|
Avantages
Fonctionnalités complètes et performances exceptionnelles
Les capacités unifiées de la plateforme couvrent l'ensemble du cycle de vie des données, de l'intégration et du développement à la gouvernance et aux services. Elle est conçue pour offrir des performances élevées, traitant des pétaoctets de données quotidiennement et planifiant des millions de tâches complexes pour gérer des charges de travail exigeantes à grande échelle.
Intelligent et facile à utiliser
Une interface utilisateur entièrement graphique et un IDE web flexible réduisent la courbe d'apprentissage. Avec la prise en charge de SQL et Python, ainsi qu'un Copilot intelligent intégré pour la génération de code et les questions-réponses intelligentes, les utilisateurs novices comme expérimentés peuvent devenir productifs rapidement.
Rentable et prêt à l'emploi
Son architecture cloud-native entièrement gérée fournit des capacités de développement et de gouvernance des données dès l'installation. Ce modèle réduit considérablement les coûts de R&D et d'O&M associés aux plateformes auto-construites, libérant ainsi des ressources pour se concentrer sur l'innovation commerciale.
Sécurisé, stable et fiable
Une sécurité de niveau financier est assurée grâce à une isolation stricte des locataires et à un système de contrôle d'accès granulaire. La stabilité de la plateforme est prouvée à l'échelle de l'entreprise, gérant les pics de charge lors d'événements tels que le Festival mondial des achats d'Alibaba Group.
Utilisateurs cibles et clients typiques
Personnel technique : Ingénieurs de données et ingénieurs algorithmes qui effectuent les travaux fondamentaux de développement et de modélisation des données.
Personnel commercial : Spécialistes des opérations et analystes BI qui effectuent des requêtes et des analyses de données en libre-service.
Personnel de direction : Administrateurs d'actifs de données et responsables de la sécurité des données qui gèrent la gouvernance des données et le contrôle de conformité.
DataWorks sert des clients dans divers secteurs, notamment les services publics, la finance, le commerce de détail, Internet, l'automobile et la fabrication. Parmi les clients typiques, on trouve :
Centre de données massives de China State Grid : Utilise DataWorks pour gérer de manière centralisée des pétaoctets de données provenant de son siège et de 27 sociétés provinciales/municipales. Son système de gouvernance et de surveillance de plateforme de données de bout en bout accélère la transformation numérique globale.
Mondelēz Chine, entreprise Fortune 500 : Tire parti de la modélisation intelligente des données de DataWorks pour une gouvernance des données de bout en bout. Cela a considérablement amélioré les capacités en libre-service de sa plateforme de données, permettant une prise de décision décentralisée basée sur les données et une transformation numérique du commerce de détail.
iDreamSky, société cotée en bourse : A remplacé son système de planification développé en interne par DataWorks, basé sur le moteur EMR open source. Cela permet au personnel technique de l'entreprise de se concentrer davantage sur les opérations commerciales, soutenant ainsi les décisions basées sur les données dans le secteur du jeu vidéo.
Pour plus d'études de cas, consultez Études de cas.
Premiers pas
Activation du service
DataWorks ne peut être utilisé que sur un PC équipé de Chrome 69 ou version ultérieure.
Pour la plupart des utilisateurs professionnels, il est préférable de commencer par activer le service DataWorks avec l'édition Professionnelle, qui couvre la majorité des fonctionnalités principales de développement et de gouvernance des données.
Avant d'effectuer un achat, consultez Présentation , Guide d'achat et Sélection de l'édition DataWorks et facturation .
Parcours d'apprentissage
Utilisez le parcours d'apprentissage sur la page d'accueil de la documentation DataWorks pour comprendre rapidement ses concepts, ses opérations de base et ses fonctionnalités avancées.
Support produit
Vous pouvez soumettre un ticket pour toute question avant-vente ou après-vente.
Annexe : L'évolution de DataWorks
Historique du développement au sein d'Alibaba Group
Depuis sa création en 2009, DataWorks a évolué parallèlement aux activités d'Alibaba. En tirant parti des capacités des moteurs de calcul Big Data comme MaxCompute et Hologres, il a traversé plusieurs étapes technologiques, soutenant le développement de la plateforme de données et des initiatives de gouvernance des données d'Alibaba. Actuellement, DataWorks compte plus de 50 000 utilisateurs actifs quotidiens au sein d'Alibaba Group, ce qui signifie qu'en moyenne un employé sur trois l'utilise. Il prend en charge plus de 300 applications de données et sert plus de 100 unités commerciales au sein d'Alibaba Group.
|
Phase (Année) |
Thème |
Développement commercial |
Développement de la plateforme |
|
Phase 1 (2012) |
Croissance commerciale diversifiée et découverte de la valeur des données |
Plusieurs équipes commerciales se sont développées en parallèle, notamment 1688, AliExpress, Taobao et eTao. |
Diverses plateformes de données coexistaient pour soutenir la transformation numérique :
|
|
Phase 2 (2015) |
Émergence de silos commerciaux verticaux |
Développement commercial vertical :
|
Lancement du Plan Moon Landing pour unifier les plateformes de données :
|
|
Phase 3 (2018) |
La plateforme de données soutient la croissance durable de l'activité |
Développement commercial axé sur les données :
|
Construction et assetisation de la plateforme de données :
|
|
Phase 4 (2021) |
La plateforme de données cloud évolue avec l'activité |
Entièrement cloud-native avec une intégration profonde de l'activité et des données :
|
La plateforme de données a servi l'activité, créant une boucle de rétroaction positive :
|
Historique du développement sur Alibaba Cloud
DataWorks a été officiellement lancé sur Alibaba Cloud en 2015, apportant des années d'expertise en Big Data aux clients du cloud. Grâce à l'itération continue de ses capacités, DataWorks collabore avec des clients et des partenaires de divers secteurs. En fournissant une gouvernance des données de bout en bout, il leur permet de gérer et d'utiliser efficacement les données, aidant ainsi les clients à améliorer la qualité et l'efficacité des données.
|**Année**
|
**Jalon**
|
**Description**
| | --- | --- | --- | |
**2009**
|
**Lancement du projet DataWorks au sein d'Alibaba Group**
|
Développement du moteur de synchronisation de données DataX interne et d'un moteur de planification de tâches pour servir des clusters Hadoop à très grande échelle.
| |
**2013**
|
**Lancement du « Plan Moon Landing » ; transformation de la pile technologique**
|
Nom de code : Plan Moon Landing. Le groupe a lancé un plan d'unification des plateformes, migrant entièrement de Hadoop vers MaxCompute. DataWorks a été adapté pour servir pleinement MaxCompute.
| |
**2015**
|
**Lancement officiel de DataWorks sur le cloud**
|
Nom de code : Plateforme Shujia. En tant que produit phare de la « Plateforme Shujia », DataWorks a fait son entrée sur le marché du cloud public et a commencé à servir les clients entreprises et gouvernementaux.
| |
**2017**
|
**Expansion internationale**
|
Déploiement achevé dans plus de 12 régions Alibaba Cloud dans le monde et début du service auprès des clients internationaux.
| |
**2018**
|
**Publication de DataWorks V2.0**
|
Évolution vers une plateforme cloud R&D Big Data intelligente tout-en-un, couvrant l'intégration des données, le développement des données, les services de données et le développement d'applications.
| |
**2019**
|
**Publication de DataWorks V3.0**
|
Prise en charge de l'orchestration hybride des tâches de plusieurs moteurs de calcul et introduction d'un nouveau système complet de gouvernance des données.
| |
**2020**
|
**Ouverture totale et construction de l'écosystème**
|
Lancement d'une nouvelle plateforme ouverte pour construire un écosystème de partenaires. Reconnu comme un acteur performant dans le Forrester Wave™ pour les entrepôts de données cloud.
| |
**2022**
|
**Amélioration des capacités de gouvernance des données**
|
Lancement du produit « Centre de modélisation et de gouvernance des données ». Obtention de la première part de marché sur le marché chinois de la gouvernance des données (IDC).
| |
**2024**
|
**Adoption de l'AIGC, lancement de nouvelles capacités Data+AI**
|
Publication principale : Copilot. Amélioration des capacités de développement et d'analyse des données, lancement du produit Copilot et fourniture de développement et de gouvernance Data+AI de bout en bout basés sur l'architecture lakehouse OpenLake.
|
Plus d'informations
Concepts DataWorks et écosystème de produits : Concepts clés et Écosystème de produits.