DataWorks:Gérer Open Data

Consulter Open Data

Examinez les métadonnées et les cas d'utilisation de chaque package pour sélectionner ceux qui répondent à vos besoins.

1. Connectez-vous à la console DataWorks. Dans la région cible, cliquez sur Data Governance > Data Map dans le volet de navigation de gauche. Sur la page qui s'affiche, cliquez sur Go to Data Map.

2. Dans le volet de navigation de gauche de la page Data Map, cliquez sur l'icône pour accéder à la page Data Catalog.

3. Dans la liste du catalogue, cliquez sur DataWorks Open Data pour accéder à la page DataWorks Open Data.

4. Basculez vers l'onglet Package List, puis cliquez sur Details pour le package souhaité. Dans la section Table List, vous pouvez consulter les tables de métadonnées et leurs descriptions.

   • Différences entre les métadonnées MetaData et Examples :

     Nom du package	Open Data	Cas d'utilisation
     MetaData	Informations sur les tables, telles que le schéma de table, les descriptions de champs et la lignée des données. Nœuds de planification et instances, tels que l'état d'exécution des tâches et les dépendances. Métadonnées de gestion, telles que les espaces de travail, les membres et les projets. Métadonnées telles que les détails de Data Quality et les détails de la gouvernance des données.	Convient pour l'inventaire des actifs de données, l'analyse de la lignée des données et la gestion des dépendances.
     Examples	Une collection de données de métriques de métadonnées. Remarque Le package Examples est fourni par DataWorks et contient une collection de tables de métriques d'exemple générées à partir des métadonnées. Les données réelles sont susceptibles de changer en fonction des exigences commerciales spécifiques. Les données affichées sur l'interface utilisateur font foi.	En combinaison avec les données brutes du package MetaData, vous pouvez rapidement créer des scénarios d'analyse courants, tels que l'analyse de l'utilisation des ressources et l'évaluation de l'état de santé des tâches.

     Important

     Pour plus de détails sur les schémas et les champs des tables de métadonnées, consultez Détails des schémas de table Open Data.

5. Pour en savoir plus sur une table de métadonnées, cliquez sur Details pour la table. Sur la page des détails de la table, vous pouvez consulter les Fields et la Description pour comprendre rapidement les relations entre les tables de métadonnées Open Data.

Installer Open Data

Installez les vues de données pertinentes au sein de votre locataire sous forme de package pour autoriser les ressources de calcul MaxCompute d'un espace de travail spécifié à accéder à ces vues.

1. Accédez à la page Open Data. Sur l'onglet Package List, sélectionnez le package cible (Metadata ou Examples) et cliquez sur Details dans la colonne Actions.

2. Sur la page du package, installez le package que vous souhaitez utiliser.

   • Première installation : dans le coin supérieur droit de la page du package, cliquez sur Load.

   • Si un enregistrement d'installation existe : sur l'onglet Installation History de la page du package, cliquez sur Load.

3. Dans la boîte de dialogue Install DataWorks Metadata, sélectionnez l'espace de travail cible et le projet MaxCompute auquel vous souhaitez accorder des autorisations.

   Remarque

   • Le projet MaxCompute autorisé est le moteur de calcul lié à l'espace de travail cible.

   • Si le moteur de calcul MaxCompute lié à l'espace de travail cible est à l'état Installed, vous n'avez pas besoin de l'installer à nouveau.

   • Pour les espaces de travail en mode standard, nous recommandons d'installer et d'accorder des autorisations aux moteurs de calcul MaxCompute pour les environnements de développement et de production.

4. Lisez les notes d'installation, cochez la case de confirmation, puis cliquez sur Confirm Installation. Une fois l'installation réussie, vous pouvez afficher le nouvel enregistrement d'installation sur l'onglet Installation History.

Pour utiliser les métadonnées d'autres packages, répétez les étapes ci-dessus pour installer et accorder des autorisations pour des packages supplémentaires.

Utiliser Open Data

Après avoir installé Open Data, vous pouvez accéder aux vues de métadonnées autorisées dans Data Studio ou DataAnalysis en utilisant le moteur de calcul de l'espace de travail cible.

1. Dans le volet de navigation de gauche de la page Data Map, cliquez sur l'icône pour accéder à la page Data Catalog.

2. Dans la liste du catalogue, cliquez sur MaxCompute, puis cliquez sur le package dont le nom est préfixé par u_meta et suffixé par le nom de la région.

3. Sur la page des détails, cliquez sur Use Now > DataStudio ou Use Now > DataAnalysis pour accéder au module correspondant afin d'interroger et d'utiliser les vues de métadonnées autorisées.

   • Utilisation dans Data Studio :

     1. Dans la barre de menu supérieure de Data Studio, basculez vers la région et l'espace de travail où Open Data est installé.

     2. Créez un nœud MaxCompute. Sur la page d'édition du nœud, vous pouvez utiliser Open Data pour développer des tâches.

     3. Utilisez l'exemple de code suivant pour vérifier que l'installation a réussi.

        SELECT  dt
                ,COUNT(*) AS database_count
        FROM    u_meta_hangzhou.databases
        GROUP BY dt
        ORDER BY dt ASC
        LIMIT   32
        ;

        Important

        • Lorsque vous testez le code, vous devez utiliser les ressources de calcul MaxCompute autorisées.

        • Remplacez u_meta_hangzhou par le nom du package dans votre catalogue de données MaxCompute. Le nom du package est préfixé par u_meta et suffixé par le nom de la région.

   • Utilisation dans DataAnalysis :

     1. La page de requête SQL dans DataAnalysis fournit des scripts d'analyse de métadonnées d'exemple que vous pouvez modifier selon vos besoins.

     2. Cliquez sur l'icône dans le coin supérieur droit de la page de requête SQL. Sélectionnez votre espace de travail autorisé et la source de données qui a été créée automatiquement lorsque vous avez lié les ressources de calcul MaxCompute. La source de données porte le même nom que le moteur de calcul. Ensuite, vous pouvez exécuter des requêtes sur les métadonnées autorisées dans DataAnalysis.

        Remarque

        Avant d'exécuter le script d'exemple, remplacez le paramètre REPLACE_WITH_WORKSPACE_ID par l'ID de l'espace de travail que vous souhaitez interroger. Sinon, une erreur se produit. Pour obtenir des informations sur la manière d'obtenir un ID d'espace de travail, consultez Configurer un espace de travail.

Désinstaller Open Data

Pour arrêter d'utiliser Open Data ou révoquer l'autorisation d'un projet MaxCompute, désinstallez le package Open Data correspondant.

1. Dans le volet de navigation de gauche de la page Data Map, cliquez sur l'icône pour accéder à la page Data Catalog.

2. Dans la liste du catalogue, sélectionnez MaxCompute puis cliquez sur le package dont le nom est préfixé par u_meta et suffixé par le nom de la région.

3. Sur l'onglet Accessible Projects de la page des détails, recherchez le projet cible et cliquez sur Uninstall dans la colonne Actions. Dans la boîte de dialogue Confirm Uninstallation of DataWorks Metadata qui s'affiche, lisez les notes de désinstallation, cochez la case de confirmation, puis cliquez sur Confirm Uninstallation.

   Important

   La désinstallation révoque les autorisations et entraîne l'échec des tâches dépendantes. Assurez-vous qu'aucune tâche active ne dépend de ces vues avant de procéder.