Platform For AI:Créer un jeu de données pour une tâche d'étiquetage

Élément

Méthode 1 : Depuis un service cloud

Méthode 2 : Téléchargement local

Procédure

1. Créez localement un fichier .manifest ou .txt en respectant le format décrit ci-dessous.

2. Téléchargez le fichier sur OSS. Pour plus d'informations, consultez la rubrique Télécharger des fichiers.

3. Créez un jeu de données depuis un service cloud. Pour plus d'informations, consultez la rubrique Créer un jeu de données : À partir d'un service cloud Alibaba Cloud.

1. Créez localement un fichier .csv ou .xlsx en respectant le format décrit ci-dessous.

2. Accédez à iTAG.

   1. Connectez-vous à la PAI console.

   2. Dans le volet de navigation de gauche, cliquez sur Workspaces. Sur la page Workspaces, cliquez sur le nom de l'espace de travail cible.

   3. Dans le volet de navigation de gauche, choisissez Data Preparation>iTAG.

3. Sur la page iTAG, cliquez sur Go to Task Center ou Go to Management Page.

4. Sous l'onglet Data Management, cliquez sur Create Original Dataset.

5. Sur la page Create Original Dataset, configurez les paramètres suivants :

   • Pour Import Data, sélectionnez Local Upload.

   • Pour Import Format, sélectionnez File.

   • Configurez les champs OSS Bucket et File Path in OSS.

   • Cliquez sur Upload file et sélectionnez le fichier .csv ou .xlsx que vous avez créé.

6. Cliquez sur Create.

Extension de fichier

Fichier .manifest ou .txt.

Fichier .csv ou .xlsx.

Format de fichier

{"data":{"source":"text sample 1"}}
{"data":{"source":"text sample 2"}}
{"data":{"source":"text sample 3"}}

Le paramètre source spécifie le contenu de l'échantillon à étiqueter. Remplacez la valeur de source par votre contenu textuel.

Une colonne du fichier .csv ou .xlsx contient le texte à étiqueter.

Exemple de fichier

textDemo1.manifest

textDemo2.csv

Élément

Méthode 1 : Analyse de dossier

Méthode 2 : Téléchargement local

Procédure

1. Téléchargez les fichiers image dans un compartiment OSS pour générer leurs URL. Pour plus d'informations, consultez la rubrique Télécharger des fichiers.

2. Créez un jeu de données en analysant un dossier. Cette opération génère automatiquement un fichier .manifest. Pour plus d'informations, consultez la rubrique Créer et gérer des jeux de données.

1. Créez un dossier local contenant les images.

2. Accédez à iTAG.

   1. Connectez-vous à la PAI console.

   2. Dans le volet de navigation de gauche, cliquez sur Workspaces. Sur la page Workspaces, cliquez sur le nom de l'espace de travail cible.

   3. Dans le volet de navigation de gauche, choisissez Data Preparation>iTAG.

3. Sur la page iTAG, cliquez sur Go to Task Center ou Go to Management Page.

4. Sous l'onglet Data Management, cliquez sur Create Original Dataset. Dans le panneau Create Original Dataset, configurez les paramètres suivants :

   • Pour Import Data, sélectionnez Local Upload.

   • Pour Import Format, sélectionnez Folder.

   • Configurez les champs OSS bucket et File Path in OSS.

   • Cliquez sur Upload Folder et téléchargez le dossier local.

5. Cliquez sur Create.

Format de fichier

{"data":{"source":"oss://****.oss-cn-hangzhou.aliyuncs.com/iTAG/pic/1.jpg"}}
{"data":{"source":"oss://****.oss-cn-hangzhou.aliyuncs.com/iTAG/pic/10.jpg"}}
{"data":{"source":"oss://****.oss-cn-hangzhou.aliyuncs.com/iTAG/pic/11.jpg"}}

Le paramètre source spécifie l'échantillon à annoter. Définissez la valeur de source sur l'URL OSS de l'échantillon.

Exemple de fichier

• Image : pictureDemo.manifest

• Vidéo : videoDemo.manifest

• Audio : audioDemo.manifest

Élément

Depuis un service cloud

Procédure

1. Créez localement un fichier .manifest ou .txt en respectant le format décrit ci-dessous.

2. Téléchargez le fichier sur OSS. Pour plus d'informations, consultez la rubrique Télécharger des fichiers.

3. Créez un jeu de données depuis un service cloud. Pour plus d'informations, consultez la rubrique Créer et gérer des jeux de données.

Extension de fichier

Fichier .manifest ou .txt.

Format de fichier

{"data":{"picture_url":"oss://****.oss-cn-hangzhou.aliyuncs.com/iTAG/pic/1.jpg","text":"Jack Ma and 17 other founders established Alibaba Group in a Hangzhou apartment. The group's first website was Alibaba.com, an English-language global wholesale marketplace."}}
{"data":{"picture_url":"oss://****.oss-cn-hangzhou.aliyuncs.com/iTAG/pic/10.jpg","text":"Alibaba Group held the first West Lake Summit, bringing together business and thought leaders from the internet industry to discuss key topics."}}
{"data":{"picture_url":"oss://****.oss-cn-hangzhou.aliyuncs.com/iTAG/pic/11.jpg","text":"Alibaba Group raised USD 82 million from several top-tier investment firms, which was the largest private equity financing in China's internet industry at the time."}}

L'objet "data" de chaque ligne représente un élément de données à étiqueter. L'objet peut contenir plusieurs paires clé-valeur pour différents types de données, comme une image et du texte.

Par exemple, la ligne suivante définit un élément de données avec une image stockée à l'adresse oss://****.oss url 01 et le texte text sample1.

{"data":{"picture_url":"oss://****.oss url 01","text":"text sample1"}}

Exemple de fichier

multiModal.manifest