Utiliser DataWorks pour exécuter périodiquement des tâches AnalyticDB for PostgreSQL - DataWorks

Dans DataWorks, utilisez un nœud AnalyticDB for PostgreSQL pour développer, planifier l'exécution périodique et intégrer des tâches AnalyticDB for PostgreSQL avec d'autres tâches. Cette rubrique décrit le flux de travail de développement.

Prérequis

Un workflow a été créé.

Dans DataStudio, vous organisez les tâches de développement pour différents moteurs de calcul au sein de workflows. Vous devez donc créer un workflow avant de créer un nœud. Pour plus d'informations, consultez la rubrique Créer un workflow.
Une ressource de calcul AnalyticDB for PostgreSQL est associée à DataStudio.

Ajoutez votre base de données AnalyticDB for PostgreSQL en tant que ressource de calcul dans DataWorks et associez-la à DataStudio. Cette association vous permet d'accéder aux données de la base de données pour le développement.
Vous avez acheté un groupe de ressources serverless (recommandé) ou un groupe de ressources exclusif pour la planification.

Contexte

Les nœuds AnalyticDB for PostgreSQL se connectent à Alibaba Cloud AnalyticDB for PostgreSQL. Pour plus d'informations, consultez la documentation AnalyticDB for PostgreSQL.

Étape 1 : Créer un nœud AnalyticDB for PostgreSQL

Connectez-vous à la console DataWorks. Dans la région cible, cliquez sur Data Development and O&M > Data Development dans le volet de navigation de gauche. Sélectionnez un espace de travail dans la liste déroulante et cliquez sur Go to Data Development.
Cliquez avec le bouton droit sur le workflow cible et choisissez Create Node > AnalyticDB for PostgreSQL > ADB for PostgreSQL.
Dans la boîte de dialogue Create Node, saisissez un Name pour le nœud et cliquez sur OK. Une fois le nœud créé, utilisez-le pour développer et configurer la tâche.

Étape 2 : Développer la tâche AnalyticDB for PostgreSQL

(Facultatif) Sélectionner une ressource de calcul AnalyticDB for PostgreSQL

Si votre espace de travail dispose de plusieurs ressources de calcul AnalyticDB for PostgreSQL, sélectionnez la ressource à utiliser. S'il n'en existe qu'une seule, DataWorks l'utilise par défaut.

Développer le code SQL

Dans l'éditeur de code du nœud AnalyticDB for PostgreSQL, rédigez des instructions SQL conformes à la syntaxe PostgreSQL.

Étape 3 : Configurer la planification des tâches

Pour exécuter une tâche de nœud périodiquement, cliquez sur Scheduling à droite de la page d'édition du nœud afin de configurer les informations de planification selon vos besoins métier. Pour plus d'informations, consultez la rubrique Présentation des propriétés de planification des tâches.

Remarque

Avant de valider le nœud, configurez son Rerun attribute et ses Parent Nodes.

Étape 4 : Déboguer le code de la tâche

Déboguez la tâche pour vérifier son bon fonctionnement.

(Facultatif) Sélectionnez un groupe de ressources et attribuez des valeurs aux paramètres personnalisés.
- Cliquez sur l'icône dans la barre d'outils. Dans la boîte de dialogue Parameter, sélectionnez le groupe de ressources de planification pour déboguer la tâche.
- Si le code de votre tâche utilise des variables de paramètre de planification, attribuez-leur des valeurs ici pour le débogage. Pour plus d'informations sur la logique d'attribution des paramètres, consultez la rubrique Déboguer les tâches.
Enregistrez et exécutez les instructions SQL.

Cliquez sur l'icône dans la barre d'outils pour enregistrer les instructions SQL. Ensuite, cliquez sur l'icône pour exécuter la tâche SQL.
(Facultatif) Effectuez un test de fumée.

Pour vérifier si une tâche sur un nœud de planification s'exécute comme prévu dans un environnement de développement, effectuez un test de fumée lors de la validation du nœud ou après celle-ci. Pour plus d'informations, consultez la rubrique Effectuer un test de fumée.

Étape 5 : Valider et déployer la tâche

Après avoir configuré la tâche, validez-la et déployez-la. Elle s'exécutera alors périodiquement selon ses propriétés de planification.

Cliquez sur l'icône dans la barre d'outils pour enregistrer le nœud.
Cliquez sur l'icône dans la barre d'outils pour valider la tâche du nœud.

Dans la boîte de dialogue Submission, saisissez une Change Description. Vous pouvez également demander une revue de code après avoir validé le nœud.
Remarque
- Vous ne pouvez pas valider le nœud tant que vous n'avez pas configuré son Rerun attribute et ses Parent Nodes.
- La fonctionnalité de revue de code garantit la qualité du code et évite les erreurs causées par le déploiement de code défectueux dans l'environnement de production sans revue. Si vous activez la revue de code, le code validé doit être approuvé par un examinateur avant de pouvoir être déployé. Pour plus d'informations, consultez la rubrique Revue de code.

Pour un espace de travail en mode standard, vous devez déployer la tâche dans l'environnement de production après l'avoir validée. Pour ce faire, cliquez sur Deploy dans le coin supérieur droit de la page de l'éditeur du nœud. Pour plus d'informations, consultez la rubrique Déployer des tâches.

Étapes suivantes

Une fois la tâche validée et déployée, elle s'exécute périodiquement en fonction de ses propriétés de planification. Cliquez sur O&M Personnel dans le coin supérieur droit de la page de l'éditeur du nœud pour afficher l'état de planification et l'historique d'exécution de la tâche périodique. Pour plus d'informations, consultez la rubrique Gérer les tâches périodiques.