DLF Catalog Data Catalog - DataWorks - Centre de documentation Alibaba Cloud

Accéder à la page du catalogue DLF

Accédez à la page Workspaces de la console DataWorks. Dans la barre de navigation supérieure, sélectionnez la région souhaitée. Repérez l'espace de travail cible et choisissez Shortcuts > Data Studio dans la colonne Actions.
Dans le volet de navigation de gauche, cliquez sur l'icône . Dans l'arborescence Data Directory, cliquez sur DLF Catalog pour ouvrir la page de gestion du catalogue DLF.

Ajouter un catalogue DLF

Ajoutez un catalogue DLF existant à la page de gestion afin de pouvoir gérer ses bases de données et ses tables.

Cliquez sur l'icône située à droite de DLF Catalog pour ouvrir la page d'ajout du catalogue DLF.

Sur l'onglet correspondant à votre version DLF, ajoutez le catalogue à la liste.

Version DLF	Instructions
DLF 1.0	Sous l'onglet DLF 1.0, cliquez sur Create DLF Catalog pour accéder à la console Data Lake Formation 1.0 et créer un catalogue DLF. Une fois le catalogue créé, ajoutez-le à la liste. Ajouter un catalogue unique : dans la liste sous l'onglet DLF 1.0, repérez le catalogue DLF à ajouter et cliquez sur Add dans la colonne Operation. Ajouter plusieurs catalogues : dans la liste sous l'onglet DLF 1.0, sélectionnez plusieurs catalogues DLF et cliquez sur Batch Add en dessous de la liste.
DLF 1.0
DLF 2.0	La création de nouveaux catalogues DLF n'est pas prise en charge.
(Recommandé) DLF 2,5 et versions ultérieures	Sous l'onglet DLF 2,5 and later, cliquez sur Create DLF Catalog pour accéder à la console Data Lake Formation 2,5 et créer un catalogue DLF. Une fois le catalogue créé, ajoutez-le à la liste. Ajouter un catalogue unique : dans la liste sous l'onglet DLF2,5, repérez le catalogue DLF à ajouter et cliquez sur Add dans la colonne Operation. Ajouter plusieurs catalogues : dans la liste sous l'onglet DLF2,5, sélectionnez plusieurs catalogues DLF et cliquez sur Batch Add en dessous de la liste.

Gérer les données du catalogue DLF

Une fois un catalogue DLF ajouté, vous pouvez créer, consulter et supprimer des bases de données et des tables au sein de celui-ci.

Gérer les bases de données

Créer une base de données

Repérez le catalogue DLF cible et cliquez sur l'icône située à sa droite.
Sur la page Create Database, saisissez le Database Name que vous souhaitez créer.
Cliquez sur Save dans la barre d'outils supérieure pour finaliser la création.

Gérer les bases de données

Consulter les bases de données : une fois une base de données ajoutée au catalogue DLF, cliquez sur l'icône située à gauche du catalogue DLF pour afficher les bases de données ajoutées.
Supprimer une base de données : si vous n'avez plus besoin de gérer une base de données, faites un clic droit dessus et sélectionnez Delete dans le menu contextuel.
Important
- Les bases de données supprimées ne peuvent pas être récupérées. Agissez avec prudence.
- Avant de supprimer une base de données, supprimez d'abord toutes les tables qu'elle contient.

Gérer les tables

Créer une table

Cliquez sur l'icône située à droite de la base de données cible pour accéder à la page Create Table.

Générez les informations de base et les définitions de colonnes pour la table en utilisant l'une des méthodes suivantes.

Création de table assistée par Copilot :
1. Cliquez sur Copilot table creation dans la barre d'outils supérieure pour ouvrir l'interface de discussion Copilot.
2. Saisissez une instruction de création de table (par exemple, Create a user table).
3. Cliquez sur Generate and Replace. Le système génère un nom de table par défaut et les informations de colonne en fonction de votre instruction.
4. Si le nom de la table et les colonnes correspondent à vos attentes, cliquez sur Accept.
  
  Remarque
  Pour modifier des informations spécifiques sur la table, cliquez d'abord sur Accept, puis modifiez manuellement les informations de table générées.

Création manuelle de table :

Créez une table en configurant les paramètres suivants.

Paramètre

Description

Informations de base

Spécifiez le Table Name, la Database Name et d'autres paramètres.

Informations sur les colonnes

Modifiez les noms de colonnes et les commentaires de colonne.

Modification manuelle : cliquez sur Insert au-dessus de la liste des colonnes, spécifiez le nombre de lignes à insérer, puis modifiez les noms de colonnes, les types de données et autres informations.
Modification intelligente par Copilot : cliquez sur Generate Field ou Generate field descriptions au-dessus de la liste des colonnes. Le système génère les colonnes et descriptions pertinentes en fonction du nom et de la description de la table que vous avez spécifiés.

(Facultatif) Configurez les informations de partitionnement.

Pour créer une table partitionnée, accédez à la section Partition Field, spécifiez le nombre de lignes de colonnes de partition (plusieurs partitions sont prises en charge) et cliquez sur Insert. Dans la liste des colonnes de partition, configurez le Field Name, le Data Type et autres informations selon les besoins de votre activité.

(Facultatif) Configurez les paramètres avancés.

Version DLF	Paramètre	Description
DLF 2,5 et versions ultérieures DLF 2.0	Propriétés personnalisées	Configurez des propriétés personnalisées pour spécifier l'emplacement de stockage de la table, le format de stockage et d'autres paramètres. Pour plus d'informations, consultez Créer une table dans Data Lake Formation.
DLF 1.0	Emplacement de stockage	Cliquez sur Change à côté de l'emplacement de stockage. Dans la boîte de dialogue OSS Path, sélectionnez un emplacement de stockage pour la table. Les métadonnées sont stockées dans Object Storage Service (OSS) pour garantir la sécurité, la fiabilité et la gestion centralisée des données.
DLF 1.0	Format de données	Définissez le format de stockage sur CSV, PARQUET, ORC, AVRO, JSON ou SELE_DEFINE. Le système définit automatiquement les formats d'entrée et de sortie, ainsi que les méthodes de sérialisation et de désérialisation en fonction du format sélectionné. CSV : format de fichier texte séparé par des virgules, adapté aux structures de données simples. PARQUET : format de stockage columnaire offrant un taux de compression élevé, adapté à l'analyse des big data. ORC : format de stockage columnaire optimisé offrant d'excellentes performances et prenant en charge les types de données complexes. AVRO : format binaire prenant en charge l'évolution du schéma, adapté aux structures de données dynamiques. JSON : prend en charge les structures imbriquées, adapté aux données semi-structurées. SELE_DEFINE : vous permet de personnaliser la logique de sérialisation et de désérialisation.

Une fois la configuration terminée, cliquez sur Publish dans la barre d'outils supérieure pour créer la table.

Gérer les tables

Consulter les tables : après avoir créé une table dans le catalogue DLF, cliquez sur l'icône située à gauche du catalogue DLF, puis cliquez sur Table pour afficher les informations de base de la table. Vous pouvez également cliquer sur un nom de table spécifique pour consulter les Details et les Basic information de la table.
Supprimer une table : faites un clic droit sur la table à supprimer et sélectionnez Delete dans le menu contextuel.

Important
Les tables supprimées ne peuvent pas être récupérées. Agissez avec prudence.

Consulter et supprimer un catalogue DLF

Consultez les détails d'un catalogue DLF ajouté ou supprimez-en un qui n'est plus nécessaire.

Consulter un catalogue.
1. Une fois un catalogue ajouté à la liste du catalogue DLF, cliquez sur l'icône située à gauche du catalogue DLF pour afficher les catalogues DLF ajoutés.
2. Survolez un catalogue DLF pour afficher sa Version, son Creation time et d'autres informations.
Supprimer un catalogue.

Si vous n'avez plus besoin de gérer un catalogue DLF, faites un clic droit dessus et sélectionnez Remove dans le menu contextuel.