A hospedagem de local permite integrar buckets do Object Storage Service (OSS) ao gerenciamento do Data Lake Formation (DLF) sem mover seus dados. Após registrar um caminho do OSS como local, o DLF oferece:
Visão geral do armazenamento — visualize o uso de armazenamento em todo o data lake
Gerenciamento de ciclo de vida — automatize transições e expirações de objetos
Visão geral dos dados das tabelas — acompanhe a frequência de acesso aos dados e a hora da última atualização
Permissões de armazenamento — controle quem pode acessar os dados por meio do DLF
Ao registrar um local, os usuários do DLF obtêm acesso aos dados existentes nesse caminho do OSS. Revise seus padrões de acesso atuais antes de registrar o local para garantir a segurança dos dados existentes.
Registrar um local
Pré-requisitos
Antes de começar, verifique se você tem:
Um bucket do OSS contendo os dados que você deseja gerenciar
Uma função do RAM com as permissões necessárias (padrão:
AliyunDLFWorkFlowDefaultRole)
Etapas
Faça logon no console do DLF.
No painel de navegação à esquerda, clique em Lake Management > Location Hosting.
Clique em Register Location.
-
Na página Register Location, configure os parâmetros a seguir e clique em OK.
ImportanteAtivar o inventário de bucket gera taxas de armazenamento adicionais , assim como ativar o logging do OSS.
Parâmetro
Descrição
Select OSS Path
Selecione um ou mais buckets do OSS para gerenciar. Formato:
oss://<your_BucketName>console do OSS. Para encontrar o nome do seu bucket, acesse o console do OSS.RAM Role
Selecione a função do RAM que o DLF usa para acessar seus dados no OSS. Padrão:
AliyunDLFWorkFlowDefaultRole.Enable OSS Bucket Inventory
Ativado por padrão. Fornece dados para a Visão geral do armazenamento e o Gerenciamento de ciclo de vida. O sistema limpa os dados automaticamente a cada 7 dias para reduzir custos de armazenamento. Se você já ativou esse recurso no console do OSS, não será possível ativá-lo novamente.
Enable OSS Logging
Ativado por padrão. Mantém atualizadas a frequência de acesso aos dados e outras métricas. O sistema limpa os dados automaticamente a cada 7 dias.
Na caixa de diálogo de confirmação, clique em OK.
O local registrado aparece na lista.
Editar um local
No painel de navegação à esquerda, clique em Lake Management > Location Hosting.
Localize o local desejado e clique em Edit na coluna Actions.
Ative ou desative o OSS bucket inventory e o OSS logging conforme necessário e clique em OK.
Não é possível desativar na página Update Location o inventário de bucket do OSS e o logging do OSS que não foram originalmente ativados pelo DLF.
Excluir um local
No painel de navegação à esquerda, clique em Lake Management > Location Hosting.
Localize o local desejado e clique em Delete na coluna Actions.
A exclusão de um local causa os seguintes efeitos:
O inventário de bucket do OSS e o logging ativados pelo DLF são removidos automaticamente. Recursos ativados manualmente no console do OSS não são afetados.
O DLF perde a permissão para gerenciar os dados de armazenamento nesse caminho. A Visão geral do armazenamento, o Gerenciamento de ciclo de vida e a Visão geral dos dados das tabelas deixarão de estar disponíveis, total ou parcialmente, para esse local.