As imagens oficiais do DataWorks fornecem ambientes de execução comuns para diferentes tipos de nós no Data Studio. Use as imagens oficiais diretamente ou crie imagens personalizadas com base nelas.
Visão geral
Se nenhum nó no Data Studio tiver uma imagem de ambiente de execução configurada, o sistema usará a imagem padrão. Essa imagem padrão fornece apenas um ambiente de execução básico, que pode não atender aos requisitos de tarefas específicas. As imagens oficiais são imagens base pré-configuradas que oferecem ambientes padronizados para diferentes tipos de tarefas. crie imagens personalizadas com base nelas para estender o suporte a outros cenários de ambiente.
Lista de imagens
As versões e as regiões com suporte estão sujeitas ao console do DataWorks. As imagens podem ter várias versões. A tabela a seguir descreve apenas os recursos das versões mais recentes.
O DataWorks fornece as seguintes imagens:
|
Nome da imagem |
Descrição da imagem |
Tarefas aplicáveis |
|
dataworks_pyodps_py311_task_pod |
A imagem oficial para nós PyODPS do DataWorks. Esta imagem usa o Python 3.11. |
|
|
dataworks_pairec_task_pod |
A imagem oficial do PAI-Rec do DataWorks, usada para executar algoritmos gerados pelo PAI-Rec. Para verificar as versões do SDK feature_store e do pyfg, consulte o console. |
|
|
dataworks_pyodps_task_pod |
A imagem oficial para nós PyODPS do DataWorks. Esta imagem usa o Python 3.7. |
|
|
dataworks_emr_base_task_pod |
A imagem base para clusters EMR. Ela é compatível com os tipos de cluster EMR Serverless Spark, EMR on ECS DataLake e EMR on ECS Custom.
|
|
|
dataworks_shell_jdk17_task_pod |
A imagem oficial para nós Shell do DataWorks. Esta imagem usa o JDK 17. |
|
|
dataworks_shell_task_pod |
A imagem oficial para nós Shell do DataWorks. Esta imagem usa o JDK 7. Se precisar personalizar o ambiente de execução e requerer a passagem de parâmetros de Subprocess, crie uma Custom image com base nesta imagem. |
|
|
dataworks_python_task_pod |
A imagem oficial para nós Python do DataWorks. Informações do sistema: py3,11-ubuntu22,04. |
|
|
dataworks_cdh_custom_task_pod |
A imagem base para clusters CDH do DataWorks. Não é possível usar essa imagem diretamente; instale o |
|
|
dataworks_controller_task_pod |
A imagem oficial para nós de atribuição do DataWorks. Se precisar personalizar o ambiente de execução e usar o nó de atribuição ou parâmetros de atribuição para passar parâmetros para nós downstream, crie uma Custom image com base nesta imagem. |
|
|
dataworks-mcp |
Usada para o desenvolvimento de tarefas de DataWorks Agent for third-party clients. Informações do sistema: py3,11-ubuntu22,04. |
|
|
dataworks-notebook |
Usada para o desenvolvimento de tarefas de Basic notebook development. Informações do sistema: py3,11-ubuntu22,04. |
|
|
dataworks_notebook_task_pod |
A imagem oficial para nós Notebook do DataWorks. Informações do sistema: py3,11-ubuntu22,04. Esta imagem é idêntica às imagens dataworks-notebook e dataworks-mcp em relação ao ambiente Python e ao ambiente de desenvolvimento pessoal. |
|
|
dataworks-maxcompute |
Usada para crie uma imagem personalizada do MaxCompute. Informações do sistema: py3,11-ubuntu20,04. |
Usar imagens
No Data Studio, use imagens oficiais ou imagens personalizadas associadas ao workspace.
Use an image in the new DataStudio: Nas seções Run Configuration e Scheduling Settings à direita da página de desenvolvimento do nó, configure o grupo de recursos e a imagem para execuções de teste e pós-implantação.
Use an image in legacy DataStudio: Na caixa de diálogo que aparece, clique em Run with Parameters na página de desenvolvimento do nó, ou no painel Scheduling Settings à direita da página de desenvolvimento do nó, configure o grupo de recursos e a imagem para a execução de teste e a execução pós-implantação do nó.
Use an image in the personal development environment: Ao criar uma instância de ambiente de desenvolvimento pessoal, selecione uma imagem oficial diferente na lista suspensa Image Configuration.
Ao configurar o grupo de recursos e a imagem, observe os seguintes pontos:
Resource Group for Scheduling: selecione um serverless resource group.
Image: selecione uma imagem oficial ou uma imagem personalizada implantada.