DataWorks:Exécuter des tests et afficher les instances de test

Opération

Description

Filter

Dans la zone 1 de l'illustration précédente, utilisez les conditions de filtrage pour isoler les instances que vous souhaitez interroger.

Vous pouvez filtrer les instances par Node Name, Node ID, Task type, Run At, Data Timestamp, Scheduling Resource Group, My Node, The node I tested today et Pause (freeze) a node.

Tasks

Dans la zone 2 de l'illustration précédente, les instances de test répondant aux critères de filtrage s'affichent sous forme de liste.

Actions

Dans la zone 3 de l'illustration précédente, vous pouvez effectuer les opérations suivantes sur les instances de test :

• DAG : le DAG affiche les dépendances en amont et en aval d'une instance de test. Vous pouvez y réaliser diverses opérations. Pour plus d'informations, consultez la rubrique Gérer les DAG.

• Diagnostics (Run Diagnostics) : permet d'effectuer une analyse de bout en bout d'une tâche. Lorsqu'une tâche ne s'exécute pas comme prévu, utilisez cette fonctionnalité pour identifier le problème. Pour en savoir plus, voir Diagnostic intelligent.

• Rerun : permet de réexécuter une tâche ayant réussi ou échoué. Une fois l'exécution réussie, la tâche peut déclencher la planification des tâches en aval qui étaient dans l'état « non exécuté ». Cette option est couramment utilisée pour gérer les nœuds échoués ou manquants.

  Remarque

  Vous ne pouvez relancer que les tâches dont le statut est Successful ou Failed.

• More :

  • Rerun Descendent Nodes : permet de réexécuter les nœuds en aval d'une tâche ayant réussi ou échoué. Vous pouvez sélectionner les tâches en aval à relancer. Après une exécution réussie, cela peut déclencher la planification des tâches descendantes qui étaient dans l'état « non exécuté ». Cette option est généralement utilisée pour la réparation des données.

    Remarque

    Seules les tâches dont le statut est Successful ou Failed peuvent être relancées. Si vous sélectionnez des tâches dans d'autres états, la page affiche un message indiquant The Selected Nodes Include Nodes That Do Not Meet the Run Conditions et la soumission de l'exécution est bloquée.

  • Set to Successful : permet de définir une tâche échouée comme réussie. Utilisez cette fonctionnalité lorsqu'une tâche échoue mais que vous ne souhaitez pas qu'elle bloque les tâches en aval. Cela sert souvent à gérer les nœuds en échec.

  • Terminate : permet d'arrêter une tâche qui n'a plus besoin d'être exécutée. Une fois la tâche arrêtée, elle se termine avec un statut d'échec.

    Remarque

    Vous ne pouvez arrêter que les instances dont le statut est Waiting time, Waiting for resources ou Running.

  • Freeze : utilisez cette fonctionnalité lorsque la tâche et ses tâches en aval n'ont pas besoin d'être exécutées pendant une certaine période. Pour plus d'informations, consultez la rubrique Geler et dégeler des instances.

    Remarque

    N'effectuez aucune opération sur le nœud projectname_root. Ce nœud constitue la racine de l'espace de travail. Toutes les instances de tâches planifiées dépendent de ce nœud. Si vous le gelez, les instances de tâches planifiées ne pourront pas s'exécuter.

  • Unfreeze : permet de dégeler une instance qui se trouve dans l'état gelé.

    • Si l'instance n'a pas encore été exécutée, elle s'exécute automatiquement une fois les tâches en amont terminées.

    • Si toutes les tâches en amont sont terminées, l'instance passe directement à l'état d'échec. Vous devez la relancer manuellement pour qu'elle s'exécute normalement.

    Remarque

    L'opération de dégel s'applique uniquement à l'instance spécifique. Si la tâche planifiée reste gelée, les instances générées le lendemain seront également gelées.

  • View Lineage : affiche les informations de lignée de l'instance actuelle.

  • View cycle task details : affiche les informations de base de l'instance actuelle.

  • View Runtime Log : une fois la tâche lancée, vous pouvez consulter le détail de son exécution dans le journal d'exécution. Pour une description des paramètres clés des journaux, voir Paramètres du journal d'exécution.

Opérations groupées

Dans la zone 4 de l'illustration précédente, vous pouvez sélectionner plusieurs tâches et effectuer des opérations telles que Terminate, Rerun, Set to Successful, Change Resource Group, Freeze, Unfreeze et Export Query Results.

Items per page

Dans la zone 5 de l'illustration précédente, modifiez le nombre d'éléments affichés par page. Un maximum de 200 éléments peut être affiché par page.

Fonctionnalité

Description

Fonctionnalités du panneau DAG

Cliquez sur DAG à côté d'une tâche pour ouvrir son DAG. Vous pouvez y effectuer les opérations suivantes :

• Search : dans la zone 1 de l'illustration précédente, filtrez les instances par Node Name, Node ID, Instance ID, Instance Name, etc.

• Select DAG Display Style : dans la zone 2 de l'illustration précédente, cliquez sur les icônes de fonctionnalités situées dans le coin supérieur droit de la vue DAG pour ajuster le style d'affichage selon vos besoins. De gauche à droite : Open Map/Close Map, Show Alert Status/Hide Alert Status, Update Node Status, Zoom In du canevas DAG, Zoom Out du canevas DAG, ratio de mise en page 1:1 entre les nœuds et le canevas, Auto Fit Screen selon la taille actuelle de la fenêtre et Toggle Full Screen View bascule.

Opérations sur une instance unique

Effectuez un clic droit sur le nœud cible pour réaliser les opérations associées.

• Terminate : permet d'arrêter une tâche qui n'a plus besoin d'être exécutée. Une fois la tâche arrêtée, elle se termine avec un statut d'échec.

• Rerun : permet de réexécuter une tâche ayant réussi ou échoué.

• More : développe le menu pour inclure des opérations telles que Set to Successful et Freeze.

Détails d'une instance unique

Dans la zone 4 de l'illustration précédente, vous pouvez effectuer les opérations suivantes :

• View Log Data : une fois la tâche lancée, vous pouvez consulter le détail de son exécution dans le journal d'exécution. Pour une description des paramètres clés des journaux, voir Paramètres du journal d'exécution.

• Show Details : permet d'afficher les informations relatives à la tâche actuelle, notamment les propriétés, le contexte, le journal d'exécution, le journal des opérations et le code. Pour plus d'informations, consultez la section Afficher les détails de l'instance.

Fonctionnalité

Description

General

Dans cet onglet, vous pouvez consulter les propriétés de planification de la tâche dans l'environnement de production. Pour une description des paramètres de la page, voir Configurer les paramètres de planification.

• Interprétation du statut de la tâche : le statut de la tâche est lié à son exécution. Si une tâche se trouve dans l'état « non exécuté », « attente de délai », « attente de ressources » ou « gelé », consultez la rubrique Résoudre les problèmes liés au statut des tâches pour le dépannage.

• Temps passé en attente de ressources : si une tâche attend des ressources depuis longtemps, utilisez la fonctionnalité de diagnostic intelligent pour identifier quelles tâches occupent les ressources lors de l'exécution de la tâche actuelle, et localisez rapidement les tâches anormales pour résoudre le problème.

• Durée excessive : si la durée d'exécution de la tâche est nettement plus longue que lors des exécutions historiques, référez-vous aux scénarios suivants pour le dépannage.

  • Tâches de non-synchronisation : contactez la personne responsable du moteur de calcul correspondant.

  • Tâches de synchronisation par lots : une phase spécifique de la tâche peut s'exécuter lentement ou la tâche peut rester bloquée dans un état prolongé d'attente de ressources. Pour plus d'informations, consultez la rubrique Résoudre les problèmes liés aux tâches de synchronisation par lots.

• Règles de surveillance : vous pouvez afficher les règles de surveillance associées à l'instance actuelle. Cliquez sur Create à droite pour créer rapidement une règle de surveillance pour le statut d'exécution de la tâche. Pour en savoir plus, voir Créer une règle de surveillance.

  Remarque

  Seules les règles de surveillance pour le statut d'exécution des tâches sont visibles ici. Les règles de surveillance Data Quality ne sont pas prises en charge.

• Surveillance des lignes de base : vous pouvez afficher les lignes de base associées à l'instance actuelle. Cliquez sur Create à droite pour créer rapidement une ligne de base. Pour plus d'informations, consultez la rubrique Gérer les lignes de base.

• Nombre maximal d'instances simultanées : affiche le nombre maximal d'instances simultanées configuré pour la tâche. La valeur est Unlimited ou un nombre spécifique (1 à 10 000). Ce paramètre limite le nombre maximal d'instances de la même tâche pouvant s'exécuter simultanément. La limite s'applique aux instances planifiées, aux instances de remplissage et aux instances de test.

Runtime Log

Une fois la tâche lancée, vous pouvez consulter le détail de son exécution dans le journal d'exécution. Pour une description des paramètres clés des journaux, voir Paramètres du journal d'exécution.

Operation Log

Permet d'afficher les enregistrements des opérations effectuées sur une tâche ou une instance, y compris l'heure, l'opérateur et l'opération spécifique.

Code

Permet d'afficher le dernier code de la tâche actuelle dans l'environnement de production. Si le code ne correspond pas aux attentes, vérifiez si la dernière version de la tâche a été déployée avec succès. Pour plus d'informations, consultez la rubrique Déployer des nœuds.