Ao criar um dataset no PAI, ative o recurso Dataset Accelerator. Depois, use o dataset acelerado ao criar uma instância DSW ou enviar um job do DLC para melhorar a eficiência de leitura de dados.
Pré-requisitos
Crie uma instância do acelerador de dataset. Para mais informações, consulte Create and manage a dataset accelerator instance.
Ativar a aceleração de dataset para um novo dataset
-
Na página Datasets, crie um dataset e configure os seguintes parâmetros principais. Para mais informações, consulte Create and manage datasets.
Parâmetro
Descrição
Create Dataset
Selecione From Alibaba Cloud.
Enable Dataset Acceleration
Marque a opção Enable Dataset Acceleration e defina seus parâmetros. Após selecionar Enable Dataset Acceleration, configure as Read/Write Properties. Para o accelerated mount target, escolha entre Select Mount Target, Create New Mount Target ou Use Internal Mount Target. O caminho de montagem padrão para um accelerated dataset é
/mnt/datasetacc.Conforme o tipo de armazenamento de dados escolhido, selecione um Dataset Accelerator e configure os parâmetros do slot de aceleração, como nome do slot, capacidade máxima e accelerated mount target. Para mais detalhes, consulte Create and manage dataset acceleration slots.
-
Clique em Submit.
O dataset criado aparece na lista Datasets com detalhes como source de dados, tipo de armazenamento, propriedades, escopo de visibilidade e hora da última modificação. O status de aceleração também é exibido para datasets com aceleração ativada.
Ativar a aceleração de dataset para um dataset existente
Na página Datasets, clique no nome de um dataset para abrir a página Dataset Details. Para mais informações, consulte Create and manage datasets.
Na página Dataset Details, clique em Dataset Acceleration no canto superior direito. Selecione um Dataset Accelerator e configure os parâmetros do slot de aceleração. Para detalhes de configuração, consulte Create and manage dataset acceleration slots.
Clique em Submit para ativar a aceleração do dataset.
Usar um dataset acelerado
Use um dataset acelerado ao criar uma instância DSW ou enviar um job do DLC.
Ao criar uma instância DSW, selecione um dataset com aceleração ativada na seção Storage Configurations. Para mais informações, consulte Create and manage DSW instances. Na área Shared Dataset, escolha um dataset acelerado do tipo OSS, NAS ou CPFS na lista suspensa e especifique um caminho de montagem, como
/mnt/data/.Ao enviar um job do DLC, selecione um dataset com aceleração ativada na seção Dataset Configuration. Para mais informações, consulte Create a training job. Na área Environment Information, defina o tipo de configuração como By dataset. Clique no ícone de edição ao lado da caixa de entrada do dataset para abrir a caixa de diálogo de seleção, mude para a aba Accelerated Dataset e selecione o dataset desejado para montá-lo.