Lors de la création d'un jeu de données sur PAI, activez la fonctionnalité Dataset Accelerator. Utilisez ensuite le jeu de données accéléré lors de la création d'une instance DSW ou de la soumission d'un travail DLC pour améliorer l'efficacité de lecture des données.
Prérequis
Vous avez créé une instance d'accélérateur de jeu de données. Pour plus d'informations, consultez la rubrique Créer et gérer une instance d'accélérateur de jeu de données.
Activer l'accélération du jeu de données pour un nouveau jeu de données
-
Sur la page Datasets, créez un jeu de données et configurez les paramètres clés suivants. Pour plus d'informations, consultez la rubrique Créer et gérer des jeux de données.
Paramètre
Description
Create Dataset
Sélectionnez From Alibaba Cloud.
Enable Dataset Acceleration
Sélectionnez Enable Dataset Acceleration et configurez ses paramètres. Une fois l'option Enable Dataset Acceleration sélectionnée, configurez également Read/Write Properties. Pour la cible de montage accélérée, choisissez entre Select Mount Target, Create New Mount Target ou Use Internal Mount Target. Le chemin de montage par défaut d'un jeu de données accéléré est
/mnt/datasetacc.Selon le type de stockage de données sélectionné, choisissez un Dataset Accelerator et configurez les paramètres de l'emplacement d'accélération du jeu de données (nom de l'emplacement, capacité maximale et cible de montage accélérée). Pour plus d'informations, consultez la rubrique Créer et gérer des emplacements d'accélération de jeu de données.
-
Cliquez sur Submit.
Le jeu de données créé apparaît dans la liste Datasets avec ses détails : source de données, type de stockage, propriétés, champ de visibilité et date de dernière modification. Le statut d'accélération s'affiche également pour les jeux de données dont l'accélération est activée.
Activer l'accélération du jeu de données pour un jeu de données existant
Sur la page Datasets, cliquez sur le nom d'un jeu de données pour ouvrir sa page Dataset Details. Pour plus d'informations, consultez la rubrique Créer et gérer des jeux de données.
Sur la page Dataset Details, cliquez sur Dataset Acceleration en haut à droite, sélectionnez un Dataset Accelerator et configurez les paramètres de l'emplacement d'accélération du jeu de données. Pour les détails de configuration, consultez la rubrique Créer et gérer des emplacements d'accélération de jeu de données.
Cliquez sur Submit pour activer l'accélération du jeu de données.
Utiliser un jeu de données accéléré
Utilisez un jeu de données accéléré lors de la création d'une instance DSW ou de la soumission d'un travail DLC.
Lors de la création d'une instance DSW, sélectionnez un jeu de données avec accélération activée dans la section de configuration Storage Configurations. Pour plus d'informations, consultez la rubrique Créer et gérer des instances DSW. Dans la zone Shared Dataset, sélectionnez un jeu de données accéléré de type OSS, NAS ou CPFS dans la liste déroulante et spécifiez un chemin de montage, tel que
/mnt/data/.Lors de la soumission d'un travail DLC, sélectionnez un jeu de données avec accélération activée dans la section de configuration Dataset Configuration. Pour plus d'informations, consultez la rubrique Créer un travail d'entraînement. Dans la zone Environment Information, définissez le type de configuration sur By dataset, cliquez sur l'icône de modification à côté de la zone de saisie du jeu de données pour ouvrir la boîte de dialogue de sélection, basculez vers l'onglet Accelerated Dataset et sélectionnez le jeu de données cible à monter.