O DataWorks é uma plataforma de dados abrangente integrada a serviços de big data e IA, como MaxCompute, E-MapReduce, Hologres, Realtime Compute for Apache Flink, AnalyticDB, StarRocks e PAI. Oferece recursos completos de integração, desenvolvimento, governança e análise de dados para arquiteturas modernas, incluindo data warehouses, data lakes e lakehouses. Baseado nas metodologias comprovadas de big data do Alibaba Group desde 2009, o DataWorks auxilia empresas a gerenciar todo o ciclo de vida dos dados. Milhares de clientes nos setores financeiro, varejista e manufatureiro utilizam a solução para impulsionar sua transformação digital.
Capacidades
O DataWorks oferece um conjunto de recursos avançados para otimizar fluxos de trabalho em todo o ciclo de vida dos dados. Suas funcionalidades estão organizadas em seis módulos principais, que abrangem desde modelagem e integração de dados até segurança e análises.
|
Módulo principal |
Recursos principais |
|
Modelagem de Dados |
Projete e gerencie ativos padronizados e reutilizáveis de data warehouse de forma sistemática. |
|
Integração de Dados |
Sincronize dados em tempo real e offline entre diversas fontes, seja em ambientes na nuvem ou on-premises. |
|
Data Studio |
Desenvolva tarefas em lote, streaming e machine learning em um IDE online com suporte a SQL, Spark e Python. Configure dependências complexas e agendamentos de tarefas. |
|
Governança de Ativos de Dados |
Administre ativos de dados com recursos como Data Quality, Data Map e Data Asset Management para definir regras de qualidade, rastrear linhagem de dados e gerenciar seu catálogo de dados. |
|
Segurança de Dados |
Garanta conformidade e segurança durante todo o ciclo de vida dos dados por meio de mascaramento, controle de acesso refinado e auditoria de segurança. |
|
Análise de Dados |
Execute análises interativas e obtenha insights de negócios usando ferramentas como SQL Query e Smart Data Discovery. Gere APIs de dados de alto desempenho sem código para integrar aplicações facilmente. |
Vantagens
Recursos abrangentes e desempenho excepcional
As capacidades unificadas da plataforma cobrem todo o ciclo de vida dos dados, desde integração e desenvolvimento até governança e serviços. Projetada para alto desempenho, ela processa petabytes de dados diariamente e agenda milhões de tarefas complexas, atendendo a cargas de trabalho empresariais exigentes e em grande escala.
Inteligente e fácil de usar
Uma interface gráfica completa e um IDE web flexível reduzem a curva de aprendizado. Com suporte a SQL e Python, além de um Copilot inteligente integrado para geração de código e perguntas e respostas inteligentes, usuários iniciantes e experientes tornam-se produtivos rapidamente.
Custo-benefício e pronto para uso
Sua arquitetura cloud-native totalmente gerenciada fornece recursos de desenvolvimento e governança de dados prontos para uso. Esse modelo reduz significativamente os custos de P&D e O&M associados a plataformas construídas internamente, liberando recursos para focar na inovação do negócio.
Seguro, estável e confiável
A segurança de nível financeiro é garantida por isolamento rigoroso de tenants e um sistema de controle de acesso refinado. A estabilidade da plataforma é comprovada em escala empresarial, suportando picos de carga durante eventos como o Global Shopping Festival do Alibaba Group.
Público-alvo e clientes típicos
Equipe técnica: Engenheiros de dados e engenheiros de algoritmos responsáveis pelo desenvolvimento e modelagem de dados essenciais.
Equipe de negócios: Especialistas em operações e analistas de BI que realizam consultas e análises de dados self-service.
Gestão: Administradores de ativos de dados e oficiais de segurança que cuidam da governança de dados e do controle de conformidade.
O DataWorks atende clientes em diversos setores, incluindo serviço público, finanças, varejo, internet, automotivo e manufatura. Entre os clientes típicos estão:
Centro de big data da China State Grid: Utiliza o DataWorks para gerenciar centralmente petabytes de dados de sua sede e de 27 empresas provinciais/municipais. Seu sistema de governança e monitoramento de plataforma de dados ponta a ponta acelera a transformação digital geral.
Empresa da Fortune 500 Mondelēz China: Aproveita a modelagem de dados inteligente do DataWorks para governança de dados ponta a ponta. Isso aprimorou significativamente as capacidades self-service de sua plataforma de dados, permitindo tomada de decisão descentralizada orientada por dados e transformação digital no varejo.
Empresa listada iDreamSky: Substituiu seu sistema de agendamento desenvolvido internamente pelo DataWorks, baseado no mecanismo open-source EMR. Isso permite que a equipe técnica foque mais nas operações de negócios, apoiando decisões orientadas por dados no setor de jogos.
Para mais histórias de clientes, consulte Histórias de clientes.
Primeiros passos
Ativar o serviço
O DataWorks só pode ser usado em um PC com Chrome 69 ou superior.
Para a maioria dos usuários corporativos, recomenda-se começar ativando o serviço DataWorks com a Professional Edition, que cobre a maioria dos recursos principais de desenvolvimento e governança de dados.
Antes de comprar, consulte Visão geral , Guia de compra e Edições e faturamento .
Trilha de aprendizado
Utilize a trilha de aprendizado na página inicial da documentação do DataWorks para entender rapidamente seus conceitos, operações básicas e recursos avançados.
Suporte ao produto
Envie um ticket para dúvidas de pré-vendas e pós-vendas.
Apêndice: A evolução do DataWorks
Histórico de desenvolvimento no Alibaba Group
Desde sua criação em 2009, o DataWorks evoluiu junto com as operações de negócios do Alibaba. Ao aproveitar as capacidades de motores de computação de big data como MaxCompute e Hologres, ele passou por múltiplos estágios tecnológicos, apoiando o desenvolvimento da plataforma de dados e as iniciativas de governança de dados do Alibaba. Atualmente, o DataWorks conta com mais de 50.000 usuários ativos diários dentro do Alibaba Group, o que significa que, em média, um em cada três funcionários o utiliza. Ele suporta mais de 300 aplicações de dados e atende a mais de 100 unidades de negócios em todo o Alibaba Group.
|
Fase (Ano) |
Tema |
Desenvolvimento de negócios |
Desenvolvimento da plataforma |
|
Fase 1 (2012) |
Crescimento diversificado de negócios e descoberta de valor dos dados |
Múltiplas equipes de negócios desenvolveram-se em paralelo, incluindo 1688, AliExpress, Taobao e eTao. |
Várias plataformas de dados coexistiam para apoiar a transformação digital:
|
|
Fase 2 (2015) |
Surgimento de silos verticais de negócios |
Desenvolvimento vertical de negócios:
|
Lançamento do Plano Moon Landing para unificar plataformas de dados:
|
|
Fase 3 (2018) |
Plataforma de dados apoia o crescimento sustentável dos negócios |
Desenvolvimento de negócios orientado por dados:
|
Construção e transformação de ativos da plataforma de dados:
|
|
Fase 4 (2021) |
Plataforma de Dados na Nuvem Cresce com os Negócios |
Totalmente cloud-native com profunda integração entre negócios e dados:
|
Plataforma de dados serviu aos negócios, criando um ciclo de feedback positivo:
|
Histórico de desenvolvimento no Alibaba Cloud
O DataWorks foi lançado oficialmente no Alibaba Cloud em 2015, trazendo anos de expertise em big data para clientes da nuvem. Por meio da iteração contínua de suas capacidades, o DataWorks trabalha com clientes e parceiros em diversos setores. Ao fornecer governança de dados ponta a ponta, ele permite que gerenciem e usem dados de forma eficaz, ajudando os clientes a melhorar a qualidade e a eficiência dos dados.
|
Ano |
Marco |
Descrição |
|
2009 |
Projeto DataWorks iniciado no Alibaba Group |
Desenvolvimento interno do motor de sincronização de dados DataX e de um motor de agendamento de tarefas para atender clusters Hadoop de ultra-grande escala. |
|
2013 |
Início do "Plano Moon Landing"; transformação do stack tecnológico |
Codinome: Plano Moon Landing. O grupo lançou um plano de unificação de plataforma, migrando totalmente do Hadoop para o MaxCompute. O DataWorks foi adaptado para servir integralmente ao MaxCompute. |
|
2015 |
Lançamento oficial do DataWorks na nuvem |
Codinome: Plataforma Shujia. Como produto central da "Plataforma Shujia", o DataWorks entrou no mercado de nuvem pública e começou a atender clientes empresariais e governamentais. |
|
2017 |
Expansão internacional |
Conclusão da implantação em mais de 12 regiões do Alibaba Cloud em todo o mundo, passando a atender clientes globais. |
|
2018 |
Lançamento do DataWorks V2.0 |
Evolução para uma plataforma cloud de P&D de big data inteligente e completa, cobrindo integração de dados, desenvolvimento de dados, serviços de dados e desenvolvimento de aplicações. |
|
2019 |
Lançamento do DataWorks V3.0 |
Suporte à orquestração híbrida de tarefas de múltiplos motores de computação e introdução de um novo sistema abrangente de governança de dados. |
|
2020 |
Abertura total e construção de ecossistema |
Lançamento de nova plataforma aberta para construir um ecossistema de parceiros. Reconhecido como Strong Performer no Forrester Wave™ para Cloud Data Warehouses. |
|
2022 |
Atualização das capacidades de governança de dados |
Lançamento do produto "Centro de Modelagem e Governança de Dados". Conquista da liderança em participação de mercado no mercado de governança de dados da China (IDC). |
|
2024 |
Adoção de AIGC, lançamento de novas capacidades Data+AI |
Lançamento principal: Copilot. Atualização das capacidades de desenvolvimento e análise de dados, lançamento do produto Copilot e fornecimento de desenvolvimento e governança Data+AI ponta a ponta baseados na arquitetura lakehouse OpenLake. |
Mais informações
Conceitos do DataWorks e ecossistema de produtos: Conceitos principais e Ecossistema de produtos.