Gere imagens e vídeos com modelos de IA usando o ComfyUI, uma ferramenta de fluxo de trabalho baseada em nós no PAI ArtLab.
Faça logon no console do PAI ArtLab .
Pré-requisitos
Você ativou o PAI ArtLab e concedeu as permissões necessárias. Para mais informações, consulte Ativar o PAI ArtLab e conceder permissões.
-
(Opcional) Você resgatou recursos de teste gratuito ou um cupom, ou adquiriu um plano de recursos. Para mais informações, consulte Faturamento do PAI ArtLab.
Utilize seus recursos de teste gratuito, cupom ou plano de recursos dentro do período de validade. Para mais informações, consulte Visualizar uso e período de validade.
Procedimento
Use o ComfyUI (Shared Edition) para gerar uma imagem com transferência de estilo e criar um vídeo a partir dela.
Faça logon no PAI ArtLab. No canto superior direito, passe o mouse sobre o ícone
e selecione a região China (Shanghai).Na página da toolbox, clique em ComfyUI (Shared Edition) para iniciar a ferramenta.
-
Gere uma imagem com transferência de estilo.
Arraste o arquivo de fluxo de trabalho de exemplo para a interface do ComfyUI.
Na área Upload Style Image ①, carregue uma imagem de estilo de exemplo. Na área Upload Style Image ②, carregue uma imagem de edifício de exemplo. Em seguida, clique em Execute e aguarde a geração da imagem.
-
Gere um vídeo.
Na página do fluxo de trabalho, clique em
para navegar pelos modelos de exemplo.Selecione ComfyUI-WanVideoWrapper > wanvideo_480p_I2V_example_01.
-
Configure os seguintes parâmetros.
Nó
Descrição
#22 WanVideoWrapper
(WanVideo Model Loader)
Em model, selecione WanVideo/Wan2_1-I2V-14B-480P_fp8_e4m3fn.safetensors.
#16 WanVideoWrapper
(WanVideo TextEncode)
This iconic building is completely covered by beautiful pink flowers, lush green leaves, intricate vines, spring garden aesthetics, as well as falling petals and fluttering butterflies. Surrealism, rich details, warm sunshine, 8K resolution, realistic natural and architectural scenes, advanced aesthetics, surrealism, high quality, and ultra clarity.#21 WanVideoWrapper
(WanVideo VAE Loader)
Em model_name, selecione WanVideo_1_VAE_bf16.safetensors.
#18
(Load Image)
Clique em upload e selecione a imagem com transferência de estilo que você gerou.
Clique em Execute e aguarde a geração do vídeo.
Operações relacionadas
Usar modelos de terceiros e nós personalizados
Certifique-se de estar usando o ComfyUI (Exclusive Edition). O ComfyUI (Shared Edition) não oferece suporte a modelos de terceiros ou nós personalizados.
-
Acesse o diretório de armazenamento OSS montado no fluxo de trabalho. No canto superior direito, clique em
e clique em link para o bucket de armazenamento.O caminho do OSS possui a seguinte estrutura de diretórios.
Ele contém os subdiretórios
custom_nodes/,input/,models/,output/,temp/eunet/.-
custom_nodes: Armazena arquivos de nós.Exemplo: Para instalar um nó de terceiros, baixe o pacote da biblioteca e carregue a pasta no diretório
custom_nodes. Por exemplo, baixe uma pasta chamadaComfyUI_FlashVSR-maine faça o upload para o seu diretóriocustom_nodes. Em uma página de repositório do GitHub, obtenha o pacote clicando em Code > Download ZIP. Descompacte o arquivo ZIP baixado para encontrar a pasta do nó.
-
models: Armazena arquivos de modelo.-
Exemplo 1: Modelos dos quais uma biblioteca de nós depende
-
Bibliotecas de nós frequentemente dependem de modelos específicos. Para garantir a execução correta dos nós, baixe e carregue os modelos necessários. Faça o upload dos modelos nos diretórios correspondentes dentro do diretório
models: o diretórioFlashVSRe o diretóriovae. Todos os arquivos de modelo mencionados devem ser carregados emmodels/FlashVSRemodels/vae.ComfyUI/models/FlashVSR ├── LQ_proj_in.ckpt # v1.1 or v1.0 ├── TDecoder.ckpt ├── diffusion_pytorch_model_streaming_dmd.safetensors # v1.1 or v1.0 ├── posi_prompt.pth ComfyUI/models/vae ├── Wan2.1_VAE.pth # or safetensors ├── lightvae2_1.pth # 32.2M or taev2_1.pth, lighttaev2_1.pth ├── Wan2.1_VAE_upscale2x_imageonly_real_v1_diff.safetensors # rename from diffusion_p
-
-
Exemplo 2: Um fluxo de trabalho relata um erro de modelo ausente
Um erro de modelo ausente geralmente ocorre porque a plataforma não se conecta à internet pública por padrão. Para resolver isso, adicione o modelo necessário ao diretório
models. Por exemplo, sedepth_anything_v2_vits_fp16.safetensorsestiver ausente, adicione-o ao diretóriomodels/depthanything/no OSS. A mensagem de erro especifica o nó que requer o modelo, como DownloadAndLoadDepthAnythingV2Model, e o caminho completo do arquivo.Se o caminho necessário não existir no OSS, crie-o.
-
-
-
Carregar novos modelos ou nós
Após carregar um modelo no espaço de armazenamento montado, clique em PaiCustom > Load New Model. Se o modelo não for encontrado, clique em Restart Process. Após a reinicialização do processo, atualize a página do navegador.
Após carregar um arquivo de nó, clique em Restart Process. Após a reinicialização do processo, atualize a página do navegador.
Se o novo modelo ou nó ainda não for encontrado, no painel de navegação à esquerda, clique em Developer Center. Localize o service ComfyUI correspondente, clique em Stop para interromper o service e, em seguida, clique em Start para iniciá-lo novamente.
Carregar arquivos de modelo ou nó É possível carregar arquivos no OSS usando o console. Para arquivos grandes, consulte Como faço para carregar objetos grandes no OSS?.
Exportar um fluxo de trabalho
Shared edition (new UI)
Clique em Workflow > Export (API) para exportar o fluxo de trabalho no formato API. Clique em Export para exportar o fluxo de trabalho em seu formato original.
Shared edition (old UI)
Clique em Save (API format) para exportar o fluxo de trabalho no formato API. Clique em Save para exportar o fluxo de trabalho em seu formato original.
Exclusive edition
Clique em Export (API) para exportar o fluxo de trabalho no formato API. Clique em Export para exportar o fluxo de trabalho em seu formato original.
Alternar versões da UI
-
Alternar da UI antiga para a nova UI:
Abra a caixa de diálogo Settings. No painel esquerdo, selecione Comfy. Na área Region settings à direita, selecione New na lista suspensa.
-
Alternar da nova UI para a UI antiga:
Abra a caixa de diálogo Settings e acesse a seção Comfy. Na área Region settings, selecione Old na lista suspensa.
Verificar a integração da API do ComfyUI
Para mais informações, consulte Guia de uso do Developer Center do PAI ArtLab.