Une fois une instance Lindorm associée à DataWorks, vous pouvez gérer et afficher les métadonnées des tables Lindorm dans Data Map.
Prérequis
Les paramètres Spark sont configurés sur la page d'association de la ressource de calcul pour collecter les métadonnées depuis Lindorm. Pour plus d'informations, consultez la rubrique Définir les paramètres Spark pour une ressource de calcul Lindorm.
Accéder à Data Map
Connectez-vous à la console DataWorks. Dans la région cible, cliquez sur dans le volet de navigation de gauche. Sur la page qui s'affiche, cliquez sur Go to Data Map.
Collecter les métadonnées des tables Lindorm
Dans le volet de navigation de gauche de Data Map, cliquez sur l'icône 
pour ouvrir la page de gestion du collecteur de sources de données. Dans la section Data Source Perspective, localisez le collecteur Lindorm et configurez un plan de collecte pour récupérer les métadonnées des tables Lindorm. Pour plus d'informations, consultez la rubrique Collecte de métadonnées.
Rechercher une table
Une fois le plan de collecte des métadonnées Lindorm exécuté avec succès, consultez les métadonnées collectées en suivant les étapes ci-dessous.
Cliquez sur l'icône
dans la barre de menu de gauche pour accéder à la page de recherche.-
Dans l'arborescence du répertoire Type située à gauche, sélectionnez Table. Sous Connection, recherchez et cliquez sur la source de données Lindorm pour ouvrir la page de liste des tables Lindorm.
RemarqueSi plusieurs sources de données existent, la liste peut ne pas s'afficher intégralement. L'option More apparaît à droite de DLF. Cliquez sur More pour trouver la source de données Lindorm.
Dans la zone de recherche située au-dessus de la liste des tables Lindorm, saisissez un mot-clé issu du nom de la table pour la localiser.
Afficher les détails d'une table
Sur la page de liste des tables Lindorm, cliquez sur une table pour ouvrir sa page de détails.
|
Feature |
Description |
References |
|
Raccourcis |
En haut de la page, utilisez les options Add to Album, View Added Albums ou Add to Favorites. |
|
|
Table Basic Information |
Dans la section Table Basic Information, consultez les informations relatives à la Database, au Table Type, au Owner, à la date de création (Created At) ainsi qu'au statut de Partitioned Table. |
|
|
Informations techniques de la table |
Consultez des informations telles que le Path de stockage, le Input Format et le Output Format. |
|
|
Details |
Consultez les Field Information et le Lineage Field de la table. |
|
|
Lignage |
Visualisez le lignage des données entre les tables Lindorm. |
|
|
Notes d'utilisation |
Modifiez les notes d'utilisation via Edit ou consultez l'historique via View Versions afin de comprendre le contexte métier des données. |
Gérer les favoris de table
Sur la page de détails de la table, ajoutez ou supprimez une table de vos favoris pour y accéder rapidement.
-
Ajouter ou supprimer des favoris.
Ajouter à Mes favoris : Cliquez sur le bouton Add to Favorites situé sous le nom de la table pour l'ajouter à Mes favoris.
Supprimer de Mes favoris : Cliquez sur le bouton Remove from Favorites situé sous le nom de la table pour la retirer de Mes favoris.
Consulter vos tables favorites.
Dans le volet de navigation de gauche de Data Map, cliquez sur l'icône
. Dans l'arborescence, choisissez pour ouvrir la page My Favorites. Sur cette page, définissez le paramètre Data Type sur Lindorm pour afficher vos tables Lindorm favorites.
Afficher les informations de base d'une table
Dans la partie gauche de la page de détails de la table, consultez les sections Table Basic Information, Technical Information et Business Information.
Table Basic Information : inclut le Table Name, la date de création (Created At) et le statut de table partitionnée (Partitioned Table).
Table Technical Information : inclut le Path de stockage, ainsi que les formats d'entrée et de sortie (Input Format et Output Format).
Business Information : inclut la Region of Current Workspace et l'Instance.
Afficher les détails de la table
Sur la page de détails de la table, cliquez sur l'onglet Details.
-
Afficher les informations sur les champs.
Consultez le nom et le type de données de chaque champ de la table.
-
Rechercher des champs.
Si la table contient de nombreux champs, saisissez le nom du champ dans la zone de recherche située sous Field Information pour le localiser rapidement.
-
Prévisualiser les descriptions des champs.
Cliquez sur Field Information sous la section Recommended Field Desc. Copilot génère une description pour vous aider à comprendre la signification et l'utilité de chaque champ.
-
Afficher le lignage des champs.
Cliquez sur l'icône
dans la colonne Actions d'un champ pour visualiser son lignage.
Afficher les informations de lignage de la table
Le lignage des données illustre les relations entre les tables et les champs en se basant sur les flux de données réels, tels que les tâches d'ordonnancement analysées et la synchronisation des données. Sur la page de lignage, vous pouvez visualiser les nœuds en amont et en aval d'une table ou d'un champ, retracer la source des données brutes et identifier la base de données de destination des données de la table. Vous pouvez également analyser l'impact du lignage à différents niveaux.
La fonctionnalité de lignage des données est disponible uniquement dans l'édition Standard de DataWorks et les versions ultérieures.
Le lignage des tables et des champs est dérivé des flux de données réels, comme les tâches d'ordonnancement analysées, afin de montrer les relations entre les tables et les champs. Il s'agit d'une opération statistique en temps réel.
-
Si Data Map ne parvient pas à afficher correctement le lignage des données généré par l'exécution d'instructions SQL dans un nœud Lindorm Spark SQL, vous pouvez définir manuellement les paramètres d'ordonnancement DataWorks pertinents dans le code de la tâche Lindorm Spark SQL. Pour plus d'informations, consultez la rubrique Associer une ressource de calcul Lindorm. Les instructions SQL suivantes peuvent générer un lignage de données :
insert into /insert overwrite table
create as select from table
create table
create table like
Cliquez sur l'onglet Lineage Information sur la page de détails de la table. Vous pouvez consulter le Table Lineage et le Field Lineage.
-
View Table Lineage
Afficher les informations de base : Placez le pointeur de la souris sur une table ou un type de nœud pour afficher les détails.
Afficher le nombre de nœuds en amont et en aval : Dans le graphique de lignage de la table, vous pouvez visualiser le nombre de nœuds en amont et en aval pour la table actuelle.
Développer ou réduire les nœuds : Selon vos besoins, vous pouvez cliquer sur l'icône
ou 
dans le graphique de lignage pour afficher ou masquer les nœuds en amont ou en aval correspondants.
-
View Field Lineage
Change Field : Dans la zone Change Field, vous pouvez sélectionner un autre champ de la table actuelle pour afficher son graphique de lignage.
Afficher les informations de base : Placez le pointeur de la souris sur un champ ou un type de nœud pour afficher les détails.
Afficher le nombre de nœuds en amont et en aval : Dans le graphique de lignage des champs, vous pouvez visualiser le nombre de nœuds en amont et en aval pour le champ actuel.
Développer ou réduire les nœuds : Vous pouvez cliquer sur l'icône
ou dans le graphique de lignage pour afficher ou masquer les nœuds en amont ou en aval correspondants.
Afficher les notes d'utilisation d'une table
Cliquez sur l'onglet Instructions sur la page de détails de la table pour Edit les notes ou consulter l'historique via View Versions afin de suivre l'objectif et l'utilisation de la table au fil du temps.
-
Modifier les notes d'utilisation de la table.
Cliquez sur Edit. Dans la boîte de dialogue qui s'affiche, saisissez les notes d'utilisation pour la table actuelle et cliquez sur Save.
-
Afficher les versions historiques des notes d'utilisation.
Cliquez sur View Versions pour voir l'historique de toutes les modifications. Depuis cet historique, vous pouvez cliquer sur View dans la colonne Actions d'une version spécifique pour consulter les notes d'utilisation de cette période.