DataWorks:Configurer le catalogue de données MaxCompute

1. À droite du schéma, cliquez sur > Create Table pour accéder à la page Create Table.

2. Vous pouvez créer une table de l'une des manières suivantes.

   • Créer une table à l'aide de Copilot :

     1. Dans la barre d'outils, cliquez sur Use Copilot to Create Table pour ouvrir l'interface de discussion Copilot.

     2. Saisissez une instruction pour créer une table. Par exemple, Create a daily aggregate table for product sales.

     3. Cliquez sur Generate and Replace. Le système génère un nom de table et des informations sur les champs en fonction de votre instruction.

     4. Si le nom de la table et les champs correspondent à vos attentes, cliquez sur Accept.

        Remarque

        Vous pouvez cliquer sur Accept, puis modifier manuellement les informations de table générées.

   • Créer une table manuellement :

     Créez une table en utilisant les paramètres suivants.

     Paramètre	Description
     Informations de base	Spécifiez un Table Name personnalisé, un Lifecycle et d'autres informations.
     Informations sur les champs	Modifiez les informations relatives aux champs et aux annotations. Modification manuelle : Cliquez sur Insert au-dessus de la liste des champs. Spécifiez le nombre de lignes, puis modifiez les informations relatives aux champs et aux annotations. Modification intelligente avec Copilot : Cliquez sur Generate Fields ou Generate Field Descriptions au-dessus de la liste des champs. Le système génère les champs et les commentaires en fonction du nom et de la description de la table.
     Paramètres avancés	Le Table Type est défini par défaut sur Internal Table. Vous pouvez configurer les Cluster Properties.

3. Une fois la configuration terminée, cliquez sur Publish dans la barre d'outils supérieure et suivez la procédure de publication pour créer la table.

1. Afficher une table.

   Après avoir créé une table, cliquez sur l'icône située à gauche du projet, puis cliquez sur Table pour afficher les informations de base. Cliquez sur un nom de table pour afficher les détails tels que Fields et DDL.

2. Effectuer des opérations sur la table.

   1. Faites un clic droit sur une table interne. Vous pouvez sélectionner Generate SQL Query Statement, Import Data, Request Permission s, Mappage des métadonnées vers Hologres ou Synchronisation des données vers Hologres.

   2. Double-cliquez sur une table interne pour ouvrir sa page de détails. Cliquez sur Edit dans le coin supérieur droit. Sur la page de modification, modifiez le Lifecycle et la Table Description, ou ajoutez, modifiez ou supprimez des champs.

      Important

      • Avant de modifier le nom d'un champ, de supprimer un champ ou de changer le type d'un champ, exécutez la commande suivante dans un nœud MaxCompute SQL pour activer l'évolution du schéma : setproject odps.schema.evolution.enable=true.

      • Pour supprimer un champ, sélectionnez la ligne correspondante, faites un clic droit et sélectionnez Delete.

      • Après avoir mis à jour la table, cliquez à nouveau sur Publish pour que les modifications prennent effet.

3. Supprimer une table.

   Faites un clic droit sur la table que vous souhaitez supprimer et sélectionnez Delete.

   Important

   Cette opération est irréversible. Procédez avec prudence.

1. À droite du schéma, cliquez sur > Create External Table pour accéder à la page de création de table External.

2. Créez une table externe en utilisant l'une des méthodes suivantes.

   • Créer une table à l'aide de Copilot :

     1. Dans la barre d'outils, cliquez sur Use Copilot to Create Table pour ouvrir l'interface de discussion Copilot.

     2. Saisissez une instruction pour créer une table. Par exemple, Create a daily aggregate table for product sales.

     3. Cliquez sur Generate And Replace. Le système génère un nom de table et des informations sur les champs en fonction de votre instruction.

     4. Si le nom de la table et les champs correspondent à vos attentes, cliquez sur Accept.

        Remarque

        Vous pouvez cliquer sur Accept, puis modifier manuellement les informations de table générées.

   • Créer une table manuellement :

     Créez une table externe en utilisant les paramètres suivants.

     Paramètre	Description
     Informations de base	Spécifiez un Table Name personnalisé, un Lifecycle et d'autres informations.
     Informations sur les champs	Modifiez les informations relatives aux champs et aux annotations. Modification manuelle : Cliquez sur Insert au-dessus de la liste des champs. Spécifiez le nombre de lignes, puis modifiez les informations relatives aux champs et aux annotations. Modification intelligente avec Copilot : Cliquez sur Generate Fields ou Generate Field Descriptions au-dessus de la liste des champs. Le système génère les champs et les commentaires en fonction du nom et de la description de la table.
     Paramètres avancés	Le Table Type est défini par défaut sur Externa Table. Configurez l'Storage Location OSS et le Storage Format. Storage Location : oss://<OSS_Bucket_Name>/ Remarque Vous pouvez obtenir le nom du bucket OSS depuis l'aperçu du bucket. Storage Format : Plusieurs formats sont pris en charge, tels que CSV, ORC et TEXTFILE.

3. Cliquez sur Publish dans la barre d'outils pour créer la table.

1. Afficher une table externe.

   Après avoir créé une table externe, cliquez sur l'icône située à gauche du projet, puis cliquez sur Externa Table pour afficher ses informations de base. Cliquez sur un nom de table pour afficher les détails tels que Fields et DDL.

2. Opérations sur les tables externes.

   Double-cliquez sur la table externe pour ouvrir sa page de détails. Cliquez sur Edit dans le coin supérieur droit. Sur la page de modification, modifiez le Lifecycle et la Table Description, ou ajoutez, modifiez ou supprimez des champs.

   Important

   • Avant de modifier le nom d'un champ, de supprimer un champ ou de changer le type d'un champ, exécutez la commande suivante dans un nœud MaxCompute SQL pour activer l'évolution du schéma : setproject odps.schema.evolution.enable=true.

   • Pour supprimer un champ, sélectionnez la ligne correspondante, faites un clic droit et sélectionnez Delete.

   • Après avoir mis à jour la table, cliquez à nouveau sur Publish pour que les modifications prennent effet.

3. Supprimer une table externe.

   Faites un clic droit sur la table externe que vous souhaitez supprimer et sélectionnez Delete.

1. Afficher une table d'objets.

   Après avoir créé une OBJECT TABLE dans un projet MaxCompute, cliquez sur l'icône située à gauche du projet, puis cliquez sur Object Table pour afficher les informations de base. Cliquez sur un nom de table pour afficher les détails tels que Fields et DDL.

2. Effectuer des opérations sur une table d'objets.

   Faites un clic droit sur une table d'objets. Vous pouvez sélectionner Generate SQL Query Statement, Request Permissions, mapper les métadonnées MaxCompute vers une table externe Hologres ou synchroniser les données MaxCompute vers une table interne Hologres.

3. Supprimer une table d'objets.

   Faites un clic droit sur la table d'objets que vous souhaitez supprimer et sélectionnez Delete.

   Important

   Cette opération est irréversible. Procédez avec prudence.

1. À droite du schéma, cliquez sur > Create View pour ouvrir la page Create View.

2. Modifiez la commande comme décrit dans la section Créer ou mettre à jour une vue. Remplacez view_name par le nom de la vue que vous souhaitez créer. Après le mot-clé AS, ajoutez l'instruction de requête pour la source de données de la vue.

3. Cliquez sur Publish en haut de la page pour créer la vue.

1. Afficher les détails d'une vue

   Après avoir créé une vue, cliquez sur l'icône située à gauche du projet, puis cliquez sur View pour afficher les informations de base. Cliquez sur un nom de vue pour afficher les détails tels que Fields et DDL.

2. Opérations sur la vue

   Double-cliquez sur la vue pour ouvrir sa page de détails. Cliquez sur Edit dans le coin supérieur droit. Modifiez la vue en changeant l'instruction de requête de la source de données après le mot-clé AS.

3. Supprimer une vue

   Faites un clic droit sur la vue que vous souhaitez supprimer et sélectionnez Delete.

1. À droite du schéma, cliquez sur > Create Materialized View pour ouvrir la page Create Materialized View.

2. Modifiez la commande comme décrit dans la section Créer une vue matérialisée. Remplacez view_name par le nom de la vue matérialisée que vous souhaitez créer. Après l'instruction AS, ajoutez l'instruction de requête pour la source de données de la vue matérialisée.

3. Cliquez sur Publish en haut de la page pour créer la vue matérialisée.

1. Afficher une vue matérialisée.

   Après avoir créé une vue matérialisée, cliquez sur l'icône située à gauche du projet, puis cliquez sur Materialized View. Cliquez sur un nom de vue matérialisée pour afficher les détails tels que Fields et DDL.

2. Supprimer une vue matérialisée.

   Faites un clic droit sur la vue matérialisée que vous souhaitez supprimer et sélectionnez Delete.

1. À droite du schéma, cliquez sur > Create Delta Live Vaterialized View pour ouvrir la page Create Delta Live Vaterialized View. Paramètres de configuration clés :

   Paramètre	Description
   Data Generation SQL	Saisissez le Data Generation SQL en vous basant sur la commande décrite dans la section Vue matérialisée dynamique. Cliquez sur Precompile pour vérifier la syntaxe SQL. Important Une table non partitionnée doit posséder une clé primaire.
   Détails des champs	Détails des champs analysés après une précompilation réussie.
   Informations sur le champ de clé primaire	Après la précompilation, le système lit les champs de clé primaire éligibles et les affiche dans la liste déroulante. Sélectionnez un ou plusieurs champs de clé primaire.
   Informations sur le champ de partition	Après la précompilation, le système lit les champs de partition éligibles et les affiche dans la liste déroulante. Sélectionnez les champs de partition pour partitionner la vue matérialisée dynamique. Plusieurs champs de partition sont pris en charge.
   Paramètres d'optimisation	Configurez les paires clé-valeur des paramètres à générer dans les TBLPROPERTIES du DDL.
   Politique d'actualisation des données	Configuration d'actualisation de la vue matérialisée Delta Live non partitionnée : Une vue matérialisée dynamique non partitionnée est créée si vous ne spécifiez pas de champ de partition. Pour les vues matérialisées dynamiques dans MaxCompute, le mode d'actualisation est défini par défaut sur l'actualisation incrémentielle. La propriété de table est TBLPROPERTIES("refresh_mode"="incremental"). Les méthodes de planification d'actualisation prises en charge sont MaxCompute Auto Refresh et DataWorks Scheduled Refresh. Configuration d'actualisation de la vue matérialisée Delta Live partitionnée : Une vue matérialisée dynamique partitionnée est créée si vous spécifiez un champ de partition. Actualisation de la partition : Configurez les paramètres tels que la méthode de planification d'actualisation, l'activation ou non de l'actualisation automatique des données, l'époque de planification et la durée d'actualisation. Actualiser les données historiques des partitions : Configurez l'actualisation ou non des données dans les partitions dont le cycle d'actualisation est terminé.

2. Cliquez sur Publish en haut de la page pour créer la vue matérialisée dynamique.

1. Publier dans un environnement de développement ou de production. Dans un espace de travail en mode standard, publiez les objets dans différents environnements.

2. Afficher une vue matérialisée dynamique.

   Après avoir créé une vue matérialisée dynamique, cliquez sur l'icône située à gauche du projet, puis cliquez sur Delta Live Materialized View pour afficher les informations de base. Cliquez sur un nom de vue pour afficher les détails tels que Fields et l'instruction DDL.

3. Supprimer une vue matérialisée dynamique.

   Faites un clic droit sur la vue matérialisée dynamique que vous souhaitez supprimer et sélectionnez Delete.

Après avoir créé une ressource dans la gestion des ressources DataWorks, cliquez sur l'icône située à gauche du projet MaxCompute, puis cliquez sur Resource pour afficher les informations de base. Cliquez sur un nom de ressource pour afficher les détails tels que la taille de stockage.

Après avoir créé une fonction dans la gestion des ressources DataWorks, cliquez sur l'icône située à gauche du projet MaxCompute, puis cliquez sur Function pour afficher les informations de base. Cliquez sur un nom de fonction pour afficher les détails tels que la taille de stockage.