A visão geral do armazenamento mostra o espaço físico em disco ocupado pelo catálogo de dados, incluindo todas as versões de objetos. Use esta página para entender o uso dos recursos de armazenamento e identificar oportunidades de otimização. Um job em lote atualiza os dados diariamente (T+1).
Diferenças nos tamanhos de armazenamento
Os tamanhos de armazenamento variam conforme o local de consulta:
|
Local |
O que inclui |
|
Lista de partições |
Apenas arquivos de dados válidos referenciados pelo snapshot mais recente — ativos, consultáveis e ainda não removidos |
|
Visão geral do armazenamento |
Arquivos de dados válidos + dados de snapshots históricos não expirados + arquivos órfãos + fragmentos de arquivo de uploads multipart do OSS |
O tamanho total exibido na visão geral do armazenamento geralmente é maior ou igual à soma de todos os tamanhos de partição na lista de partições. Por exemplo, se a visão geral do armazenamento indicar 100 GB e a lista de partições totalizar 60 GB, a diferença de 40 GB provém de snapshots históricos não expirados, arquivos órfãos e fragmentos de uploads multipart do OSS pendentes de remoção.
Visualize a visão geral do armazenamento
Catálogo
Faça login no console do DLF.
No painel de navegação à esquerda, clique em Catalogs e clique em nome do seu catálogo.
-
Selecione a aba Storage Overview.
Metadata Usage: Exibe o número total de objetos de metadados, bancos de dados, tabelas e partições.
Total Metadata Objects Trend: Mostra um gráfico com a tendência histórica do total de objetos de metadados no intervalo de tempo selecionado.
Storage Usage: Indica a capacidade de armazenamento e o número total de arquivos.
Storage Size Trend e File Count Trend: Apresentam gráficos com as tendências históricas do tamanho total dos dados armazenados e da quantidade de arquivos no período selecionado.
Storage Tier Distribution: Exibe um gráfico de pizza com o tamanho e a porcentagem de cada classe de armazenamento dos arquivos da tabela: Standard, Infrequent Access, Archive e Cold Archive.
Esta aba exibe os dados de armazenamento do catálogo atual.
Banco de dados
Faça login no console do DLF.
No painel de navegação à esquerda, clique em Catalogs e clique em nome do seu catálogo.
Na seção Databases, clique em nome do banco de dados.
-
Selecione a aba Storage Overview.
Data Overview: Exibe o número total de tabelas, partições, a capacidade de armazenamento e o total de arquivos.
Storage Tier Distribution: Mostra um gráfico de pizza com o tamanho e a porcentagem de cada classe de armazenamento dos arquivos da tabela: Standard, Infrequent Access, Archive e Cold Archive.
Esta aba exibe o uso de armazenamento do banco de dados atual.
Tabela
Faça login no console do DLF.
No painel de navegação à esquerda, clique em Catalogs e clique em nome do seu catálogo.
Na seção Databases, clique em nome do banco de dados.
Clique em nome de uma tabela.
-
Selecione a aba Storage Overview.
Data Overview: Exibe o número total de partições, a capacidade de armazenamento e o total de arquivos da tabela.
Basic Information: Mostra a hora do último acesso aos dados da tabela.
Partition Data Overview: Exibe o nome da partição, o tamanho de armazenamento, o total de arquivos, a hora do último acesso aos dados, a data de criação da partição e a hora da última atualização.
Storage Tier Distribution: Apresenta um gráfico de pizza com o tamanho e a porcentagem de cada classe de armazenamento dos arquivos da tabela: Standard, Infrequent Access, Archive e Cold Archive.
Esta aba exibe os dados de armazenamento físico da tabela atual.
Próximos passos
Para reduzir a discrepância entre o armazenamento físico e os dados consultáveis, expire snapshots antigos e remova arquivos órfãos das tabelas. Em casos de grandes discrepâncias, verifique também se há uploads multipart do OSS incompletos, pois eles geram fragmentos de arquivo até serem abortados ou expirarem.