O MaxCompute, serviço de computação de big data nativo da cloud anteriormente conhecido como ODPS, é um data warehouse inteligente na cloud SaaS de nível empresarial desenvolvido pela Alibaba Cloud. Ele oferece custo-benefício, é orientado por IA e fornece computação multimodal com segurança de nível empresarial.
Introdução ao produto
O MaxCompute é um data warehouse inteligente na cloud de nível empresarial voltado para análise, baseado em SaaS. Sua arquitetura serverless entrega um service de data warehouse online totalmente gerenciado e pronto para uso, eliminando os limites de escalabilidade e elasticidade das plataformas de dados tradicionais.
A otimização inteligente de computação e armazenamento, a arquitetura aberta de data lakehouse, a aceleração de consultas interativas e em tempo quase real, além das capacidades integradas de Dados+IA, permitem analisar grandes conjuntos de dados de forma econômica e eficiente, com sobrecarga operacional mínima.
Dezenas de milhares de empresas utilizam o MaxCompute para computação e análise de dados, transformando informações em insights de negócios com eficiência.
Arquitetura do service
A arquitetura do MaxCompute compreende uma camada de armazenamento, uma camada de computação e uma plataforma unificada de operações e gerenciamento. Esses componentes são construídos sobre uma infraestrutura estável com implantação multizona.
A camada de armazenamento utiliza seu mecanismo de armazenamento para integrar um sistema nativo com as classes de armazenamento Standard, Infrequent Access e Archive. Também suporta a arquitetura aberta de data lakehouse (OpenLake).
A camada de computação emprega múltiplos mecanismos para suportar diversas tarefas de computação, incluindo processamento offline, em tempo quase real e cargas de trabalho de Dados+IA.
A camada de operações e gerenciamento atua como o núcleo de controle e gestão da plataforma. Oferece administração de recursos para projetos, cotas e prioridades, além de monitoramento abrangente — incluindo observação de recursos, monitoramento de alertas e diagnóstico de jobs — juntamente com capacidades completas de auditoria de segurança.
A plataforma completa integra-se a products de camada superior, como DataWorks e PAI, por meio de interfaces de acesso padrão para desenvolvimento, como kits de desenvolvimento de software (SDKs), APIs e Java Database Connectivity (JDBC).
Benefícios
-
Data warehouse empresarial com excelente custo-benefício
Facilidade de uso: Pré-integrado a diversos services e compatível com SQL padrão para desenvolvimento imediato.
Escalabilidade: A arquitetura serverless desacopla armazenamento e computação. Proporciona escalabilidade flexível sem planejamento prévio e adota o modelo de faturamento pagamento conforme o uso. Isso atende ao crescimento repentino dos negócios e permite alocação dinâmica de recursos durante picos e vales de demanda.
Segurança e estabilidade: Inclui capacidades nativas de controle de acesso, segurança e recuperação de desastres. Também oferece funcionalidades de observação de recursos e diagnóstico de jobs.
Custo-benefício: Entrega soluções analíticas inteligentes para otimização contínua de desempenho e custos.
-
Computação otimizada para dados incrementais e completos em múltiplos cenários
Suporte a gravações em streaming e computação incremental em tempo quase real: A computação incremental do MaxCompute desacopla a computação do armazenamento, oferecendo processamento unificado de dados incrementais e completos, além de capacidades unificadas de processamento em stream e batch em um único mecanismo SQL. Por meio do Delta Live MV, o sistema detecta automaticamente alterações nos dados upstream e realiza atualizações contínuas, simplificando a construção de pipelines de computação incremental. É compatível com vários métodos de ingestão de dados, como sincronização em tempo real de banco de dados completo e gravações e atualizações em streaming via Flink.
O {{XREF_0}} atualizado retorna resultados de consulta para 2,8 bilhões de linhas de dados em apenas um segundo.
-
{{XREF_2}} com arquitetura aberta
O data lakehouse do MaxCompute suporta a solução OpenLake, permitindo que múltiplos mecanismos acessem os mesmos dados do OpenLakehouse.
Compatível com análise de consulta federada e com diversos formatos de dados open source predominantes no mercado.
O MaxCompute permite expor dados a mecanismos open source de terceiros por meio da Storage API e conectores, simplificando a integração de mecanismos de computação. Por exemplo, o {{XREF_3}} integra-se profundamente aos recursos de computação, dados e sistema de permissões do MaxCompute.
-
Dados+IA
O {{XREF_4}} oferece interfaces de programação Python, é compatível com operadores Pandas e integra-se perfeitamente ao PAI.
O MaxFrame inclui pacotes de dependências de terceiros e modelos de uso geral. Suporta gerenciamento de imagens personalizadas e proporciona integração de Dados+IA para cenários de deep learning, como modelos grandes, por meio de suas capacidades nativas de pré-processamento de big data na cloud.
-
Ampla variedade de cenários
O MaxCompute fornece soluções de data warehouse e services de modelagem analítica para diversos cenários de computação. Funciona como uma plataforma unificada para data warehousing, BI, análise em tempo quase real, análise de data lake, machine learning, entre outros. É utilizado em grande escala dentro do Alibaba Group.
-
Ecossistema rico de products:
O MaxCompute integra-se profundamente a products da Alibaba Cloud, como {{XREF_7}}, {{XREF_8}}, {{XREF_9}} e {{XREF_10}}, atendendo a variados cenários de análise de dados.
Utilize o DataWorks para sincronização de dados, design de processos de negócios, desenvolvimento de dados, gerenciamento e operações e manutenção (O&M) em uma única plataforma.
Aproveite os componentes de algoritmo da plataforma de machine learning PAI para executar operações como treinamento de modelos em dados do MaxCompute.
Use o Hologres para acelerar consultas em dados do MaxCompute por meio de tabelas externas ou exporte dados para o Hologres visando análises interativas.
Empregue o Quick BI para criar relatórios a partir de dados do MaxCompute e realizar análises visuais.
Recursos
O MaxCompute oferece os seguintes recursos principais.
Categoria de recurso | Descrição |
Capacidades básicas de data warehouse |
|
Capacidades de computação para múltiplos cenários |
|
Arquitetura aberta |
|
Capacidades de nível empresarial |
|
Segurança, recuperação de desastres e estabilidade |
|
Anúncios e atualizações
{{XREF_31}}
{{XREF_32}}
{{XREF_33}}
{{XREF_34}}
Para mais atualizações do product, consulte Anúncios e Atualizações do MaxCompute.