A aba Data Overview na página de detalhes de uma tabela apresenta um panorama do consumo de armazenamento e da atividade de acesso. Use essas métricas para identificar tabelas com crescimento acelerado, ociosas ou que requerem limpeza, sem consultar os dados diretamente.
Se o recurso de gerenciamento de data lake estiver ativado, a aba também exibe a distribuição por classe de armazenamento e por tamanho de arquivo.
Métricas
|
Métrica |
O que mede |
Origem dos dados |
|
Tamanho |
Tamanho total de todos os dados armazenados na tabela |
Local hospedado no DLF: estatísticas do Object Storage Service (OSS). Outros locais: estatísticas do mecanismo E-MapReduce (EMR). |
|
Número total de arquivos da tabela |
Número total de arquivos armazenados na tabela |
Local hospedado no DLF: estatísticas do OSS. Outros locais: estatísticas do mecanismo EMR. |
|
Número de partições |
Número total de partições na tabela |
Metadados |
|
Última atualização de DDL |
Data da última alteração do esquema da tabela por meio de uma instrução de linguagem de definição de dados (DDL) |
Local hospedado no DLF: estatísticas do OSS |
|
Última atualização de dados |
Data da última modificação dos dados da tabela |
Local hospedado no DLF: estatísticas do OSS |
|
Visitas a arquivos no último dia |
Número de acessos à tabela no último dia |
Mecanismos de computação (atualmente apenas EMR — consulte os requisitos). Atualização diária às 00:00, com atraso de cerca de 10 minutos. |
|
Visitas a arquivos nos últimos sete dias |
Número de acessos à tabela nos últimos sete dias |
Mecanismos de computação (atualmente apenas EMR) |
|
Visitas a arquivos nos últimos 30 dias |
Número de acessos à tabela nos últimos 30 dias |
Mecanismos de computação (atualmente apenas EMR) |
Requisitos para as métricas de visitas a arquivos
As métricas de Visitas a arquivos têm os seguintes requisitos:
Versão do EMR V3.45.1 ou superior, ou V5.11.1 ou superior. Para outras versões do EMR, atualize primeiro o componente EMRHOOK em um gateway do EMR. Consulte Atualizar o componente EMRHOOK em um gateway do EMR.
Há suporte apenas para os mecanismos de computação Spark e Hive.
Casos de uso
Otimização de armazenamento: classifique as tabelas por Tamanho para identificar as maiores e priorizá-las na otimização da camada de armazenamento ou na compactação.
Arquivamento a frio: use as métricas de Visitas a arquivos para identificar tabelas sem acessos recentes. Tabelas com baixo ou nenhum acesso nos últimos 30 dias são candidatas ao armazenamento de arquivamento a frio.
Limpeza de dados obsoletos: ordene pela Última atualização de dados para localizar tabelas sem atualizações por longos períodos. Analise essas tabelas para decidir entre limpá-las ou removê-las.
visualize a visão geral dos dados de uma tabela
Faça login no console do DLF.
No painel de navegação à esquerda, escolha Metadata > Metadata.
Para acessar a tabela, clique em Table e defina os parâmetros Catalog List e Database Name e, em seguida, insira o nome da tabela que deseja pesquisar.
Em seguida, clique em nome da tabela para abrir a página de detalhes.
Por fim, clique em Data Overview.