DataWorks支持自定义资源组(包括自定义调度资源组和自定义数据集成资源组),如果您有富余的服务器资源,可将此部分资源作为DataWorks中任务运行的资源组使用。本文为您介绍自定义资源组的概要信息。

适用场景

自定义资源组适用于如下场景:
  • 访问IDC网络环境:进行数据同步时,需要访问自己的IDC,该场景可以使用自定义资源组。
  • 减少迁移工作量:如果本地已经有任务运行,您可以选用自定义资源组,直接调度任务在自己的服务器上,减少脚本迁移的工作量。

使用限制

自定义资源组的限制情况如下表。
资源组类型 版本限制 可执行任务限制 删除操作限制
自定义调度资源组 需要开通DataWorks企业版及以上版本,并且提交工单开放白名单。 仅支持执行数据集成任务。 不支持删除自定义调度资源组。
自定义数据集成资源组 需要开通DataWorks专业版及以上版本。 仅支持执行Shell任务。 不涉及。

计费说明

购买对应增值版本DataWorks后,即可使用自定义资源组功能,自定义资源组不另外收费。DataWorks增值版本的费用,详情请参见版本服务计费说明
说明 使用自定义数据集成资源组后,执行数据集成任务时不会收取相关费用;产生的公网流量,也不会在DataWorks中收费。

使用自定义资源组

使用自定义资源组的主要操作流程如下:
  • 自定义调度资源组
    1. 开通DataWorks企业版及以上版本,并且提交工单开放白名单。
    2. 新增自定义调度资源组。
    3. 资源组添加并初始化服务器。
    4. 使用自定义调度资源组,即修改任务运行的资源组为自定义调度资源组。
    操作详情请参见新增和使用自定义调度资源组
  • 自定义数据集成资源组
    1. 购买云服务器ECS。
    2. 查看ECS主机名和内网IP地址。
    3. 开通8000端口。
    4. 开通DataWorks专业版及以上版本。
    5. 新增并配置自定义数据集成资源组,包括添加服务器、安装Agent、检查连通性。
    6. 使用自定义数据集成资源组,即修改任务运行的资源组为自定义数据集成资源组。
    操作详情请参见新增和使用自定义数据集成资源组