O Data Lake Formation (DLF) 1.0 é um serviço totalmente gerenciado para criar data lakes e lakehouses na nuvem. O DLF oferece gerenciamento unificado de metadados, controles de segurança e permissões, além de exploração de dados com um clique em vários mecanismos de computação para eliminar silos de dados.
Preços
|
Item |
Modelo de faturamento |
Nível gratuito |
|
Gerenciamento de metadados |
Pagamento conforme o uso |
Primeiro 1 milhão de objetos de metadados armazenados por mês |
|
Solicitações de API |
— |
Primeiras 1 milhão de solicitações de API por mês |
|
Exploração de dados |
Visualização pública gratuita |
Não cobrado |
|
Gerenciamento de permissões |
Visualização pública gratuita |
Não cobrado |
|
Gerenciamento de data lake |
Visualização pública gratuita |
Não cobrado |
Objetos de metadados e solicitações de API que excederem o nível gratuito serão cobrados. Para mais detalhes sobre preços, consulte Faturamento.
Arquitetura
Catálogo de Dados
Visualize e gerencie o Catálogo de Dados do seu data lake no console.
Tabelas e funções de banco de dados
Visualize e gerencie tabelas e funções de banco de dados no console. As APIs CreateDatabase e CreateTable permitem operações de metadados e integração com serviços de terceiros. O DLF oferece suporte ao gerenciamento de múltiplas versões e gera metadados automaticamente via extração.
Gerenciamento de permissões de dados
O Gerenciamento de permissões de dados controla o acesso aos dados no nível do data lake em cinco níveis de granularidade: catálogo de dados, banco de dados, tabela de dados, coluna de dados e função.
Gerenciamento de data lake
O Gerenciamento de data lake fornece análises e sugestões de otimização para armazenamento de dados, gerencia o ciclo de vida dos dados, ajuda a otimizar custos e simplifica a operação e manutenção (O&M).
Exploração de dados
Consulte e analise dados com um clique usando Spark 3.0 SQL. Salve consultas históricas, visualize dados, exporte resultados e gere conjuntos de dados de teste TPC-DS com apenas um clique.
Cenários
Criar um data lake baseado em nuvem
Combine o DLF com o E-MapReduce e o Object Storage Service (OSS) para criar um data lake na nuvem.
Criar uma arquitetura de data lakehouse
Combine o DLF com o MaxCompute, o DataWorks e o E-MapReduce para criar um data lakehouse.
Criar uma arquitetura de data lakehouse totalmente gerenciada
Combine o DLF com o Databricks e o OSS para criar um data lakehouse na nuvem totalmente gerenciado.
Analisar dados no OSS
Use a extração de metadados e a exploração de dados para analisar e explorar dados estruturados e semiestruturados no OSS.