Platform For AI:Crie um conjunto de dados para uma tarefa de rotulagem

Item

Método 1: De serviço de nuvem

Método 2: Upload local

Procedimento

1. Crie um arquivo local .manifest ou .txt usando o formato descrito abaixo.

2. Faça upload do arquivo para o OSS. Upload de arquivos.

3. Crie um conjunto de dados a partir de um serviço de nuvem. Criar um conjunto de dados: De um serviço de nuvem da Alibaba Cloud.

1. Crie um arquivo local .csv ou .xlsx usando o formato descrito abaixo.

2. Acesse o iTAG.

   1. Faça login no PAI console.

   2. No painel de navegação à esquerda, clique em Workspaces. Na página Workspaces, clique no nome do workspace desejado.

   3. No painel de navegação à esquerda, escolha Data Preparation>iTAG.

3. Na página iTAG, clique em Go to Task Center ou Go to Management Page.

4. Na aba Data Management, clique em Create Original Dataset.

5. Na página Create Original Dataset, configure os seguintes parâmetros:

   • Em Import Data, selecione Local Upload.

   • Em Import Format, selecione File.

   • Configure OSS Bucket e File Path in OSS.

   • Clique em Upload file e selecione o arquivo .csv ou .xlsx criado.

6. Clique em Create.

Extensão de arquivo

Um arquivo .manifest ou .txt.

Um arquivo .csv ou .xlsx.

Formato de arquivo

{"data":{"source":"text sample 1"}}
{"data":{"source":"text sample 2"}}
{"data":{"source":"text sample 3"}}

O parâmetro source especifica o conteúdo da amostra a ser rotulado. Substitua o valor de source pelo seu conteúdo de texto.

Uma coluna no arquivo .csv ou .xlsx contém o texto a ser rotulado.

Exemplo de arquivo

textDemo1.manifest

textDemo2.csv

Item

Método 1: Varredura de pasta

Método 2: Upload local

Procedimento

1. Faça upload dos arquivos de imagem para um bucket do OSS para gerar suas URLs. Upload de arquivos.

2. Crie um conjunto de dados varrendo uma pasta, o que gera automaticamente um arquivo .manifest. Criar e gerenciar conjuntos de dados.

1. Crie uma pasta local contendo as imagens.

2. Acesse o iTAG.

   1. Faça login no PAI console.

   2. No painel de navegação à esquerda, clique em Workspaces. Na página Workspaces, clique no nome do workspace desejado.

   3. No painel de navegação à esquerda, escolha Data Preparation>iTAG.

3. Na página iTAG, clique em Go to Task Center ou Go to Management Page.

4. Na aba Data Management, clique em Create Original Dataset. No painel Create Original Dataset, configure os seguintes parâmetros:

   • Em Import Data, selecione Local Upload.

   • Em Import Format, selecione Folder.

   • Configure OSS bucket e File Path in OSS.

   • Clique em Upload Folder e faça upload da pasta local.

5. Clique em Create.

Formato de arquivo

{"data":{"source":"oss://****.oss-cn-hangzhou.aliyuncs.com/iTAG/pic/1.jpg"}}
{"data":{"source":"oss://****.oss-cn-hangzhou.aliyuncs.com/iTAG/pic/10.jpg"}}
{"data":{"source":"oss://****.oss-cn-hangzhou.aliyuncs.com/iTAG/pic/11.jpg"}}

O parâmetro source especifica a amostra a ser anotada. Defina o valor de source como a URL do OSS da amostra.

Exemplo de arquivo

• Imagem: pictureDemo.manifest

• Vídeo: videoDemo.manifest

• Áudio: audioDemo.manifest

Item

De serviço de nuvem

Procedimento

1. Crie um arquivo local .manifest ou .txt usando o formato descrito abaixo.

2. Faça upload do arquivo para o OSS. Upload de arquivos.

3. Crie um conjunto de dados a partir de um serviço de nuvem. Criar e gerenciar conjuntos de dados.

Extensão de arquivo

Um arquivo .manifest ou .txt.

Formato de arquivo

{"data":{"picture_url":"oss://****.oss-cn-hangzhou.aliyuncs.com/iTAG/pic/1.jpg","text":"Jack Ma and 17 other founders established Alibaba Group in a Hangzhou apartment. The group's first website was Alibaba.com, an English-language global wholesale marketplace."}}
{"data":{"picture_url":"oss://****.oss-cn-hangzhou.aliyuncs.com/iTAG/pic/10.jpg","text":"Alibaba Group held the first West Lake Summit, bringing together business and thought leaders from the internet industry to discuss key topics."}}
{"data":{"picture_url":"oss://****.oss-cn-hangzhou.aliyuncs.com/iTAG/pic/11.jpg","text":"Alibaba Group raised USD 82 million from several top-tier investment firms, which was the largest private equity financing in China's internet industry at the time."}}

O objeto "data" de cada linha representa um item de dados a ser rotulado. O objeto pode conter vários pares chave-valor para diferentes tipos de dados, como uma imagem e texto.

Por exemplo, a linha a seguir define um item de dados com uma imagem armazenada em oss://****.oss url 01 e o texto text sample1.

{"data":{"picture_url":"oss://****.oss url 01","text":"text sample1"}}

Exemplo de arquivo

multiModal.manifest