Créer et gérer des tâches d'entraînement distribué - Platform For AI

Prérequis en matière de compte et d'autorisations

Compte Alibaba Cloud : ce compte peut réaliser toutes les opérations sans autorisation supplémentaire.
Utilisateur RAM : accordez des permissions à un utilisateur RAM en l'ajoutant en tant que membre d'espace de travail avec un rôle approprié. Pour plus de détails sur les permissions associées à chaque rôle, consultez Annexe : Rôles et permissions.

Créer une tâche d'entraînement distribué

Créez une tâche d'entraînement distribué DLC dans l'onglet Deep Learning Containers (DLC) en suivant la procédure ci-dessous.

Accédez à la page de gestion des tâches.
1. Connectez-vous à la console PAI.
2. Dans le volet de navigation de gauche, cliquez sur Workspaces. Sur la page de liste des espaces de travail, cliquez sur le nom de l'espace de travail cible.
3. Dans le volet de navigation de gauche de l'espace de travail, choisissez AI Computing Asset Management > Jobs pour ouvrir la page de gestion des tâches.
Dans l'onglet Deep Learning Containers (DLC), cliquez sur Create Task.
Sur la page Create Task, configurez les paramètres et cliquez sur OK.

Pour plus d'informations sur la configuration des paramètres, consultez Créer une tâche d'entraînement.

Gérer les tâches d'entraînement distribué

La liste des tâches d'entraînement distribué regroupe toutes les tâches soumises via différents points d'entrée, tels que DLC, les nœuds d'algorithme dans Designer qui s'exécutent sur DLC, et l'outil de ligne de commande DLC. Vous pouvez y gérer vos tâches.

Avertissement

Les tâches DLC supprimées ne peuvent pas être restaurées. Procédez avec prudence.

Recherchez rapidement une tâche spécifique par son nom, son ID, sa plage horaire, son framework ou son statut.
Cliquez sur le nom d'une tâche pour accéder à sa page de détails, où vous pouvez consulter son statut d'exécution, le statut des instances, la vue des ressources et les journaux.
Survolez une tâche avec le curseur pour afficher rapidement son statut d'exécution.
Cliquez sur TensorBoard dans la colonne Actions pour visualiser les résultats de l'entraînement.

Remarque
Les rapports d'analyse TensorBoard ne sont consultables que pour les tâches d'entraînement associées à un jeu de données.
Clone une tâche pour créer une copie avec la même configuration.

Interroger les journaux agrégés par mot-clé

Procédure

Recherchez des événements de journal spécifiques par mot-clé dans l'onglet Log en suivant ces étapes :

Dans le volet de navigation de gauche, choisissez AI Computing Asset Management > Jobs. Sur la page Deep Learning Containers (DLC), cliquez sur le nom d'une tâche.
Cliquez sur l'onglet Log et configurez les paramètres.
1. Au-dessus de la section Task Information, sélectionnez une plage horaire pour la collecte des journaux.
  
  Remarque
  La collecte des journaux peut se poursuivre après la fin de la tâche. Sélectionnez une plage horaire adaptée.
2. Dans la zone Instances, sélectionnez les instances requises.
3. Dans la zone de recherche à droite, saisissez des mots-clés pour rechercher les journaux ou événements pertinents.

Règles de requête de base

La recherche par mot-clé dans les journaux agrégés correspond à des mots complets. Étant donné que le service Simple Log Service (SLS) sous-jacent pour DLC utilise un tokenizer, une correspondance exacte de chaîne pour une phrase n'est pas garantie.

Par exemple, une recherche pour abc def renvoie tous les journaux contenant à la fois abc et def, et pas seulement les journaux contenant la phrase exacte abc def.

Règles de requête floue

Vous pouvez utiliser des caractères génériques pour les requêtes floues dans les journaux agrégés. Les caractères génériques pris en charge sont l'astérisque (*) et le point d'interrogation (?). Les autres caractères spéciaux ne sont pas valides pour les requêtes floues.

Un astérisque (*) représente une séquence de zéro caractère ou plus. Un point d'interrogation (?) représente un seul caractère.
L'astérisque (*) et le point d'interrogation (?) doivent être placés au milieu ou à la fin d'un mot-clé ; ils sont inefficaces au début.

Par exemple, le mot-clé abc* trouve les mots qui commencent par abc. Le mot-clé ab?d trouve les mots de quatre caractères qui commencent par ab et se terminent par d.

Remarque

Lors d'une requête floue, le système identifie d'abord jusqu'à 100 termes dans le logstore correspondant à votre modèle de caractère générique. Il renvoie ensuite toutes les entrées de journal contenant l'un de ces termes. Si votre préfixe est très court et correspond à plus de 100 termes, les résultats peuvent être incomplets. Des termes plus spécifiques donnent des résultats plus précis.

Limitations des délimiteurs

Le service de journalisation SLS sous-jacent pour DLC utilise les caractères suivants comme délimiteurs intégrés pour tokeniser les journaux d'entraînement : , '";=()[\",\"]{}?@&<>/:\n\t\r

Ces délimiteurs divisent le contenu du journal en jetons recherchables. Si vous recherchez un mot-clé composé uniquement de ces caractères délimiteurs, le service ne le traite pas comme un jeton complet et la recherche ne renvoie aucun résultat.

Exemple 1 : Une recherche pour &&& ne renverra aucun journal pertinent. Pour obtenir des résultats pertinents, construisez un mot-clé incluant le contexte du texte environnant.

Exemple 2 : Pour trouver les journaux contenant a&b, utilisez l'expression complète comme mot-clé au lieu de simplement &. Cela renvoie les journaux contenant à la fois a et b. Des mots-clés plus spécifiques donnent des résultats plus précis.

Exemples de mots-clés

Besoin de recherche

Exemple de mot-clé

Rechercher les journaux contenant Error.

Error

Rechercher les journaux contenant loss et acc.

loss acc

Effectuer une recherche floue pour tous les journaux liés à Traceback.

Traceback*

Rechercher les journaux contenant abc&def.

abc&def