L'onglet Data Overview de la page de détails d'une table offre un aperçu de son empreinte de stockage et de son activité d'accès. Utilisez ces métriques pour identifier les tables à croissance rapide, inactives ou nécessitant un nettoyage, sans interroger directement les données.
Si vous avez activé la fonctionnalité de gestion du data lake, cet onglet affiche également la répartition par classe de stockage et la distribution des tailles de fichiers.
Métriques
| Métrique | Ce qu'elle mesure | Source des données |
|---|---|---|
| Size | Taille totale de toutes les données stockées dans la table | Emplacement hébergé par DLF : statistiques Object Storage Service (OSS). Autres emplacements : statistiques du moteur E-MapReduce (EMR). |
| Total Number of Tables | Nombre total de fichiers stockés dans la table | Emplacement hébergé par DLF : statistiques OSS. Autres emplacements : statistiques du moteur EMR. |
| Number of Partitions | Nombre total de partitions dans la table | Métadonnées |
| DDL Last Updated | Dernière modification du schéma de la table via une instruction de langage de définition de données (DDL) | Emplacement hébergé par DLF : statistiques OSS |
| Data Last Updated | Dernière modification des données de la table | Emplacement hébergé par DLF : statistiques OSS |
| File Visits within Last Day | Nombre d'accès à la table au cours des dernières 24 heures | Moteurs de calcul (actuellement EMR uniquement — voir prérequis). Actualisé quotidiennement à 00:00, avec un délai d'environ 10 minutes. |
| File Visits within Last Seven Days | Nombre d'accès à la table au cours des sept derniers jours | Moteurs de calcul (actuellement EMR uniquement) |
| File Visits within Last 30 Days | Nombre d'accès à la table au cours des 30 derniers jours | Moteurs de calcul (actuellement EMR uniquement) |
Prérequis pour les métriques File Visits
Les métriques File Visits nécessitent les éléments suivants :
Une version EMR V3.45.1 ou ultérieure, ou V5.11.1 ou ultérieure. Pour les autres versions d'EMR, mettez d'abord à niveau le composant EMRHOOK dans une passerelle EMR. Consultez Mettre à niveau le composant EMRHOOK dans une passerelle EMR.
Seuls les moteurs de calcul Spark et Hive sont pris en charge.
Cas d'utilisation
Optimisation du stockage : Triez les tables par Size pour repérer les plus volumineuses et prioriser leur optimisation par niveau de stockage ou leur compaction.
Archivage à froid : Exploitez les métriques File Visits pour identifier les tables peu ou pas consultées récemment. Les tables affichant peu ou pas d'accès sur 30 jours sont de bonnes candidates pour un stockage d'archivage à froid.
Nettoyage des données obsolètes : Triez par Data Last Updated pour localiser les tables non mises à jour depuis longtemps. Examinez ces tables afin de décider s'il convient de les nettoyer ou de les supprimer.
Consulter la vue d'ensemble des données d'une table
Connectez-vous à la console DLF.
Dans le volet de navigation de gauche, choisissez Metadata > Metadata.
Cliquez sur l'onglet Table. Définissez les paramètres Catalog List et Database Name, puis saisissez le nom de la table pour lancer la recherche.
Cliquez sur le nom de la table pour ouvrir sa page de détails.
Cliquez sur l'onglet Data Overview.