DataWorks:Nœud DM

Contexte

Dameng (DM) est une base de données de traitement transactionnel en ligne (OLTP) intégrée aux systèmes métier. Elle combine les avantages du calcul distribué et élastique avec le cloud computing, offrant flexibilité, simplicité d'utilisation, fiabilité et haute sécurité. Pour plus d'informations, consultez le site officiel de DM.

Prérequis

• Le flux de travail métier a été créé.

  Data Studio effectue les opérations de développement spécifiques au moteur en se basant sur les flux métier. Avant de créer un nœud, créez un flux métier. Pour plus d'informations, consultez la rubrique Créer un flux métier.

• Une source de données DM a été créée.

  Pour accéder à votre base de données DM, ajoutez-la d'abord en tant que source de données DM dans DataWorks. Pour créer une source de données, consultez la rubrique Gérer les sources de données. Pour savoir comment utiliser une source de données DM dans DataWorks, consultez la rubrique Source de données DM.

  Remarque

  Les nœuds DM prennent uniquement en charge les sources de données DM créées à l'aide d'une chaîne de connexion JDBC.

• Une connexion réseau est établie entre votre source de données et un groupe de ressources.

  Assurez-vous que la source de données souhaitée est connectée au groupe de ressources que vous souhaitez utiliser. Pour plus d'informations sur la configuration de la connectivité réseau, consultez la rubrique Établir une connexion réseau entre un groupe de ressources et une source de données.

• (Facultatif ; requis pour les utilisateurs RAM) L'utilisateur RAM utilisé pour le développement des tâches a été ajouté à l'espace de travail cible et s'est vu attribuer le rôle Development ou Workspace Administrator (ce dernier octroie des autorisations étendues ; attribuez-le avec prudence). Pour plus d'informations sur l'ajout de membres et l'attribution d'autorisations, consultez la rubrique Ajouter des membres à un espace de travail.

Limites

Régions prises en charge : Chine (Hangzhou), Chine (Shanghai), Chine (Beijing), Chine (Shenzhen), Chine (Chengdu), Chine (Hong Kong), Singapour, Malaisie (Kuala Lumpur), Allemagne (Francfort), États-Unis (Silicon Valley) et États-Unis (Virginie).

Étape 1 : Créer un nœud DM

1. Connectez-vous à la console DataWorks. Dans la région cible, cliquez sur Data Development and O&M > Data Development dans le volet de navigation de gauche. Sélectionnez un espace de travail dans la liste déroulante et cliquez sur Go to Data Development.

2. Cliquez avec le bouton droit sur le flux de travail cible et choisissez Create Node > Database > DM.

3. Dans la boîte de dialogue Create Node, saisissez un Name pour le nœud et cliquez sur OK. Une fois le nœud créé, vous pouvez développer et configurer la tâche au sein de ce nœud.

Étape 2 : Développer une tâche DM

(Facultatif) Sélectionner une source de données DM

Si votre espace de travail comporte plusieurs sources de données DM, sélectionnez celle appropriée sur la page d'édition du nœud. Si une seule source de données DM a été créée, elle est utilisée par défaut pour le développement.

Développer du code SQL : Exemple simple

Dans l'éditeur de code du nœud DM, rédigez le code de la tâche. Le code suivant sert d'exemple.

SELECT * FROM usertablename;

Développer du code SQL : Utiliser des paramètres de planification

DataWorks propose des Scheduling Parameter qui vous permettent de transmettre dynamiquement des valeurs à votre code dans des scénarios de planification périodique. Définissez des variables dans le code de votre tâche en utilisant le format ${nom_variable}, puis attribuez une valeur à la variable dans le volet de navigation de droite, sous Properties > Scheduling Parameter. Pour plus d'informations sur les formats pris en charge et les détails de configuration, consultez les rubriques Formats pris en charge pour les paramètres de planification et Configurer et utiliser les paramètres de planification.

Le code suivant sert d'exemple.

SELECT '${var}'; -- You can use this with a scheduling parameter.

Étape 3 : Configurer la planification des tâches

Pour exécuter périodiquement la tâche du nœud, cliquez sur Scheduling à droite de la page d'édition du nœud et configurez les paramètres de planification selon vos besoins. Pour plus d'informations, consultez la rubrique Vue d'ensemble des propriétés de planification des tâches.

Étape 4 : Tester le code de la tâche

Effectuez les opérations de test suivantes selon vos besoins pour vérifier que la tâche se comporte comme prévu.

1. (Facultatif) Sélectionnez un groupe de ressources et attribuez des valeurs de paramètre personnalisées.

   • Cliquez sur l'icône dans la barre d'outils. Dans la boîte de dialogue Parameter, sélectionnez le groupe de ressources de planification pour les tests.

   • Si le code de votre tâche utilise des variables de paramètres de planification, attribuez-leur des valeurs ici à des fins de test. Pour plus d'informations sur la logique d'attribution des paramètres, consultez la rubrique Processus de débogage des tâches.

2. Enregistrez et exécutez le code de la tâche.

   Cliquez sur l'icône dans la barre d'outils pour enregistrer le code de votre tâche. Cliquez ensuite sur l'icône pour exécuter la tâche.

3. (Facultatif) Effectuez des tests de fumée.

   Pour lancer des tests de fumée dans l'environnement de développement et vérifier que la tâche planifiée du nœud s'exécute comme prévu, effectuez ces tests pendant ou après la soumission du nœud. Pour plus d'informations, consultez la rubrique Effectuer des tests de fumée.

Étape 5 : Soumettre et publier la tâche

Après avoir configuré la tâche du nœud, soumettez-la et publiez-la. Une fois publiée, le nœud s'exécute périodiquement en fonction de sa configuration de planification.

1. Cliquez sur l'icône dans la barre d'outils pour enregistrer le nœud.

2. Cliquez sur l'icône dans la barre d'outils pour soumettre la tâche du nœud.

   Dans la boîte de dialogue Submission, saisissez une Change Description. Vous pouvez également choisir d'exiger une revue de code après la soumission.

   Remarque

   • Vous devez configurer l'Rerun attribute et les Parent Nodes du nœud avant de pouvoir le soumettre.

   • La revue de code permet de garantir la qualité du code et d'éviter les erreurs causées par la publication directe de code non revu en production. Si la revue de code est activée, le code du nœud soumis doit être approuvé par les relecteurs avant sa publication. Pour plus d'informations, consultez la rubrique Revue de code.

Si vous utilisez un espace de travail en mode standard, après avoir soumis la tâche avec succès, cliquez sur Publish dans le coin supérieur droit de la page d'édition du nœud pour déployer la tâche dans l'environnement de production. Pour plus d'informations, consultez la rubrique Publier une tâche.

Étapes suivantes

Opérations sur les tâches : Une fois qu'une tâche est validée et publiée, elle s'exécute périodiquement selon la configuration du nœud. Cliquez sur O&M dans le coin supérieur droit de la page d'édition du nœud pour accéder au Operation Center et consulter l'état de planification et d'exécution de la tâche planifiée. Pour plus d'informations, consultez la rubrique Gestion des tâches planifiées.