O iTAG é a plataforma de rotulagem de dados do PAI. Ela oferece modelos para rotular diversos tipos de dados, incluindo imagens, texto, vídeo e áudio, além de suportar tarefas multimodais.
Tarefas de rotulagem compatíveis
O iTAG fornece modelos integrados para as seguintes tarefas de rotulagem:
Imagem: classificação de imagens, detecção de objetos, OCR de imagens, reconhecimento de tabelas e segmentação semântica de imagens.
Texto: classificação de textos, reconhecimento de entidades nomeadas e reconhecimento de relacionamento entre entidades.
Vídeo: classificação de vídeos, marcação de quadros de vídeo e OCR de vídeo.
Áudio: classificação de áudio, segmentação de áudio e reconhecimento de áudio.
Modelos grandes: resposta visual a perguntas, anotação RLHF multimodal, imagem para texto, explicação de imagem e texto, reescrita de diálogos, ordenação de diálogos e agrupamento de diálogos.
Para usar modelos diferentes dos integrados ao console, como para classificação de texto e imagem, consulte gerenciamento de modelos.
Fluxo de trabalho
-
Faça upload dos dados a serem rotulados para o Object Storage Service (OSS). Em seguida, use o módulo de gerenciamento de conjuntos de dados para importar os dados e criar um conjunto de dados. O sistema gera um arquivo de índice
.manifest— um arquivo JSONL com caminhos de dados e metadados — para as tarefas de rotulagem.ImportanteAtualmente, o iTAG suporta apenas dados armazenados no OSS. Para garantir o acesso adequado, o bucket do OSS deve estar na mesma região que o PAI.
-
Para um conjunto de dados existente, crie e distribua uma tarefa de rotulagem com um modelo integrado ou personalizado. O fluxo de trabalho da tarefa consiste em três etapas: rotulagem, inspeção de qualidade e aceitação. A rotulagem é obrigatória; a inspeção de qualidade e a aceitação são opcionais. Cada etapa tem a seguinte finalidade:
Rotulagem: Na página Label Task, os anotadores assumem um pacote de tarefas, concluem a rotulagem e a enviam.
Inspeção de qualidade: Na página Quality Inspection Task, os revisores assumem um pacote de tarefas concluído para revisar, modificar ou rejeitar.
Aceitação: Na página Acceptance Task, os proprietários do projeto assumem um pacote de tarefas para revisão final, modificação ou rejeição.
-
Processe a tarefa de rotulagem
Siga o fluxo de trabalho para rotular, inspecionar ou aceitar pacotes de tarefas e produzir dados rotulados.
-
Exporte os resultados da rotulagem
Exporte os resultados da rotulagem para um diretório especificado no OSS para treinamento de modelos. Os resultados são exportados no formato
.manifest.
Faturamento
Plataforma iTAG (Gratuito): A plataforma iTAG é gratuita se você usar sua própria equipe para rotulagem manual.
Serviço de rotulagem inteligente (Gratuito): O serviço de rotulagem inteligente, disponível para certos modelos de modelos grandes como imagem para texto e explicação de imagem e texto, é atualmente gratuito. Você receberá uma notificação prévia caso este serviço se torne um recurso pago.
Object Storage Service (OSS) (Pago): O iTAG depende do Object Storage Service (OSS) da Alibaba Cloud. Portanto, os custos de armazenamento do OSS e de tráfego de leitura/gravação de dados são faturados separadamente de acordo com os padrões de faturamento do OSS.
Serviço de terceirização de rotulagem manual (Pago): Para delegar a rotulagem de dados à equipe profissional da Alibaba Cloud, envie um ticket ou entre no grupo 21930006619 do DingTalk para contatar a equipe do PAI sobre este serviço pago.
Obter ajuda
Se você encontrar problemas como erros de carregamento de dados, permissões insuficientes ou precisar configurar regras de compartilhamento de recursos de origem cruzada (CORS) para o OSS, consulte as Perguntas frequentes do iTAG.