Trabajos de DataWorks - SchedulerX - Centro de documentación de Alibaba Cloud

SchedulerX permite crear trabajos de DataWorks y orquestarlos con otros trabajos en SchedulerX para procesar datos.

Requisitos previos

Inicie sesión en la consola de DataWorks y active DataWorks Enterprise Edition.

Procedimiento de acceso del cliente

Uso de dependencias del SDK

Utilice las dependencias del cliente del SDK de SchedulerX.

Actualice el cliente de SchedulerX a la versión V1.3.4 o posterior.
Al conectar el cliente a DataWorks Enterprise Edition, escriba el AccessKey ID y el AccessKey secret de su cuenta de Alibaba Cloud en la configuración de inicio. Asegúrese de que su cuenta de Alibaba Cloud tenga permisos de operación en DataWorks Enterprise Edition.
```
# Account information that is used to access DataWorks.
spring.schedulerx2.aliyunAccessKey=AccessKey ID of the Alibaba Cloud account
spring.schedulerx2.aliyunSecretKey=AccessKey secret of the Alibaba Cloud account
```

Uso de un agente

Si utiliza un agente para el acceso, despliéguelo y úselo para acceder a DataWorks siguiendo las instrucciones en Use the SchedulerX agent to connect an application to SchedulerX (Script or HTTP jobs). Se requieren los siguientes elementos:

Paquete de instalación. Haga clic en el enlace para descargarlo.

Agregue el AccessKey ID y el AccessKey secret de la cuenta de Alibaba Cloud con permisos para operar DataWorks a los parámetros de inicio en el archivo agent.properties.
```
# Account information that is used to access DataWorks.
aliyunAccessKey={ALIYUN_ACCESS_KEY}
aliyunSecretKey={ALIYUN_SECRET_KEY}
```

Imágenes de Docker

Seleccione una imagen de Docker según su red y arquitectura de CPU.

Red	x86_64	arm64
(Public network) China (Hangzhou)	schedulerx-registry.cn-hangzhou.cr.aliyuncs.com/schedulerx2/agentilatest-amd64	schedulerx-registry.cn-hangzhou.cr.aliyuncs.com/schedulerx2/agent:latest-arm64
(Public network) Singapore	schedulerx-registry.ap-southeast-1.cr.aliyuncs.com/schedulerx2/agent:latest-amd64	schedulerx-registry.ap-southeast-1.cr.aliyuncs.com/schedulerx2/agent:latest-arm64

Al iniciar desde una imagen de Docker, configure las variables de entorno de inicio ALIYUN_ACCESS_KEY y ALIYUN_SECRET_KEY.

Creación de un trabajo de DataWorks

Realice las siguientes operaciones en la consola de DataWorks:
1. Cree un flujo de trabajo con activación manual. Para más información, consulte Create a manually triggered workflow.
2. Cree un nodo sin configurar dependencias. Para más información, consulte Create nodes and configure node dependencies.
3. Envíe el flujo de trabajo. Para más información, consulte Commit a workflow.
Realice las siguientes operaciones en la consola de SchedulerX:
1. Cree un flujo de trabajo y agregue los nodos de DataWorks (trabajos) al flujo de trabajo. Para más información, consulte Create a workflow.
  
  En la página Create Job, configure los parámetros. En Job Type, seleccione dataworks. Introduzca el Application ID, Workflow Name, Job ID, Project Name y Region. En Execution Mode, seleccione Standalone. En Priority, seleccione Medium. Luego, haga clic en Next.
2. Una vez agregado el trabajo, arrastre los puntos de ambos extremos hacia los puntos de otro trabajo para establecer una relación de dependencia. Así se crea un flujo de trabajo completo.
3. Configure la activación programada para el flujo de trabajo creado. Para más información, consulte Cron.

Resultados

Tras activarse el flujo de trabajo, puede consultar su progreso y el estado de cada nodo en la lista de instancias de flujo de trabajo. Haga clic derecho en un nodo para consultar detalles del resultado de ejecución.

Siguientes pasos

En la lista de instancias de trabajos de SchedulerX, puede consultar los detalles de ejecución de un nodo de trabajo, finalizar un trabajo o volver a ejecutarlo.
En Operation Center de DataWorks, puede consultar información sobre las instancias de nodos de DataWorks programadas.