在数据同步任务配置前,您需要确保用于执行同步任务的独享数据集成资源组与您将要同步的数据来源端与目的端数据库的网络连通性,您可以根据数据库所在网络环境,选择合适的网络解决方案来实现网络连通。本文为您介绍数据库在不同网络环境中时,可选用的网络连通方案。
注意事项
- 连通性测试通过是任务运行成功的必要条件,连通性工具测试仅验证网络等基本条件通过,具体任务是否成功以实际任务运行结果为准。任务提交生产运行前确保测试通过。
- 独享调度资源组网络连通方案同样可参考当前文档进行与目标访问地址的网络配置。
- 独享数据集成资源组暂不支持经典网络环境下的数据库同步,建议您将经典网络环境下的数据库迁移至VPC环境。
- 无法保障公网环境下的数据同步速度,建议通过内网同步。
背景信息
复杂网络环境下的数据源进行异构数据源间的数据同步,可选择使用独享数据集成资源组,需要先进行网络打通。

购买合适规格的资源组
购买并选择合适规格的独享数据集成资源组,购买详情请参见:新增和使用独享数据集成资源组。
说明
- 不同规格的资源组支持同步的任务数或并发线程数存在上限,您需要根据业务需要选择合适规格的资源组。
- 离线和实时同步任务推荐使用不同的资源组,以便任务分开执行。如果选择同一个资源组,任务混跑会带来资源抢占、运行态互相影响等问题。例如,CPU、内存、网络等互相影响,可能会导致离线任务变慢或实时任务延迟等问题,甚至在资源不足的极端情况下,可能会出现任务被OOM KILLER杀掉等问题。
配置网络连通
步骤一:网络绑定
网络连通方案选择取决于数据源与DataWorks工作空间(独享资源组,即同步机器)间的环境关系,包括以下场景:

同步网络选择 | 数据源所在环境 | 数据源与DataWorks工作空间关系 | 网络连通通用逻辑 | 配置示例 |
---|---|---|---|---|
通过VPC(内网)同步 | 数据源在阿里云
| 同阿里云主账号、同地域![]() | 独享数据集成资源组绑定数据源所在VPC即可。 | 场景一:数据库与DataWorks工作空间同阿里云主账号、同地域 |
不在同一个同阿里云主账号下或不在同一个地域下![]() |
| |||
数据源不在阿里云
| ![]() | 场景四:数据库在IDC | ||
通过公网访问数据源 | - | ![]() | 独享数据集成资源组有公网访问能力,可直接连通。 | - |
说明 无论上述哪种场景,如果数据库存在白名单访问控制,您都需要将资源组绑定的交换机网段或独享资源组本身EIP添加至数据库白名单中。获取数据库需要添加的白名单详情请参见:添加白名单。 |
步骤二:添加白名单
无论上述哪种场景,如果数据源存在白名单访问控制,您都需要将资源组绑定的交换机网段或独享资源组本身EIP添加至数据源白名单中。
- 通过内网同步,请添加独享资源组绑定的交换机网段IP至数据源白名单列表。
- 通过公网同步,请添加独享资源组本身的EIP至数据源白名单列表。
获取白名单方式如下:
- 如果您使用独享数据集成资源组走VPC内网同步数据,请在数据库白名单列表中添加独享数据集成资源组绑定的交换机网段。获取独享绑定的交换机网段信息如下:
在DataWorks控制台独享资源组页签下,单击目标独享数据集成资源组后的网络设置,查看交换机网段并将其添加至数据库白名单列表中。
- 如果您使用独享数据集成资源组走公网同步数据,请在数据库白名单列表中添加独享数据集成资源组本身的EIP地址。获取独享数据集成资源组EIP地址如下:说明 如果您之后对独享数据集成资源组进行了扩容操作,请检查此处待添加的EIP是否有变动,为了避免任务执行出错,请在扩容后第一时间更新数据库添加的白名单。
各场景网络连通配置示例
下文以使用阿里云RDS数据库为例,通过网络配置,实现DataWorks独享数据集成资源组通过内网与各环境下的阿里云RDS实现网络连通。获取RDS的专有网络信息,详情请参见切换专有网络VPC和虚拟交换机。
说明 以下示例仅为独享资源组绑定普通安全组场景下的说明。
场景一:数据源与DataWorks工作空间同阿里云主账号、同地域
网络连通配置操作 | 配置操作图示 |
---|---|
| ![]() |
场景二:数据源与DataWorks工作空间同阿里云主账号、不同的地域
网络连通配置操作 | 配置操作图示 |
---|---|
![]() |
场景三:数据库与DataWorks工作空间使用不同阿里云主账号
网络连通配置操作 | 配置操作图示 |
---|---|
![]() |
场景四:数据源在IDC
数据源不在阿里云环境可参考该场景配置。
后续步骤
数据同步任务配置,操作详情请参见以下文档。