如果迁移的源数据库类型为SQL Server,如自建SQL Server、RDS SQL Server,您需要在配置具体的迁移任务前,参考本文的注意事项及限制,以保障数据迁移任务的正常运行。
源库为SQL Server的迁移方案概览
根据如下迁移方案,查看迁移任务的注意事项及限制:SQL Server间迁移
类型 | 说明 |
---|
源库限制 | - 带宽要求:源库所属的服务器需具备足够出口带宽,否则将影响数据迁移速率。
- 待迁移的表需具备主键或唯一约束,且字段具有唯一性,否则可能会导致目标数据库中出现重复数据。
- 如迁移对象为表级别,且需进行编辑(如表列名映射),则单次迁移任务仅支持迁移至多1000张表。当超出数量限制,任务提交后会显示请求报错,此时建议您拆分待迁移的表,分批配置多个任务,或者配置整库的迁移任务。
- 单次迁移任务仅支持迁移至多10个数据库。当超出数量限制,会出现稳定性和性能问题的风险,此时建议您拆分待迁移的表,分批配置任务。
- 如需进行增量迁移,数据日志:
- 若源库待迁移的表需要开启CDC,则需满足以下条件,否则预检查将会失败。
- sys.sysservers视图的srvname字段与SERVERPROPERTY函数返回值保持一致。
- 若源库是自建SQL Server,则数据库所有者需是sa;若源库是RDS SQL Server,则数据库所有者需是sqlsa。
- 若源库是企业版,则需为2008及以上版本。
- 若源库是标准版,则需为2016SP1及以上版本。
- 若源库为SQL Server 2017版(包括标准版和企业版),建议升级版本。
- 源库的操作限制:
- 在库表结构迁移和全量迁移阶段,请勿执行库或表结构变更的DDL操作,否则数据迁移任务会失败。
- 如仅执行全量数据迁移,请勿向源实例中写入新的数据,否则会导致源和目标数据不一致。为实时保持数据一致性,建议选择结构迁移、全量数据迁移和增量数据迁移。
|
其他限制 | - 不支持迁移TEXT、CURSOR、ROWVERSION、SQL_VARIANT、HIERACHYID和GEOMETRY。
- 如在配置任务对象及高级配置时选择SQLServer增量同步模式为解析源库日志做增量同步,则待迁移的表需具备聚集索引,且聚集索引中需包含主键列;待迁移的表不支持堆表、无主键表、压缩表、含计算列表。在混合式日志解析模式下,没有如上限制。
- 如需跨版本迁移,请提前确认兼容性。
- 为保障增量数据迁移延迟的准确性,解析源端日志做增量同步模式,DTS会在源库中新增一个名为dts_log_heart_beat的心跳表;混合式增量同步模式,DTS会在源库中创建触发器dts_cdc_sync_ddl、心跳表dts_sync_progress、DDL存储表dts_cdc_ddl_history以及会开启库级别CDC和部分表CDC,建议源端开启CDC的表数据变更量不超过1000 RPS。
- 执行数据迁移前需评估源库和目标库的性能,同时建议业务低峰期执行数据迁移。否则全量数据迁移时DTS占用源和目标库一定读写资源,可能会导致数据库的负载上升。
- 由于全量数据迁移会并发执行INSERT操作,导致目标数据库的表产生碎片,因此全量迁移完成后目标数据库的表存储空间会比源实例的表存储空间大。
- 请确认DTS对数据类型为FLOAT或DOUBLE的列的迁移精度是否符合业务预期。DTS会通过
ROUND(COLUMN,PRECISION) 来读取这两类列的值。如果没有明确定义其精度,DTS对FLOAT的迁移精度为38位,对DOUBLE的迁移精度为308位。 - DTS会尝试恢复七天之内迁移失败任务。因此业务切换至目标实例前,请务必结束或释放该任务,或者将DTS访问目标实例账号的写权限用
revoke 命令回收掉。避免该任务被自动恢复后,源端数据覆盖目标实例的数据。 - 若迁移任务包含增量数据迁移,则不支持重建索引操作,否则可能造成任务失败,甚至数据丢失。
- 若单次迁移任务中开启CDC的表数量大于1000,则预检查会失败。
- 如需进行增量迁移,请禁用目标库中已启用的触发器和外键,否则会导致迁移任务失败。
|
特殊情况 | 当目标实例为RDS SQL Server时 DTS会自动在RDS SQL Server中创建数据库,如果待迁移的数据库名称不符合RDS SQL Server的定义规范,您需要在配置迁移任务之前在RDS SQL Server中创建数据库。相关操作,请参见创建数据库。 |
SQL Server迁移至云原生数据仓库AnalyticDB MySQL版
类型 | 说明 |
---|
源库限制 | - 带宽要求:源库所属的服务器需具备足够出口带宽,否则将影响数据迁移速率。
- 待迁移的表需具备主键或唯一约束,且字段具有唯一性,否则可能会导致目标数据库中出现重复数据。
- 如迁移对象为表级别,且需进行编辑(如表列名映射),则单次迁移任务仅支持迁移至多1000张表。当超出数量限制,任务提交后会显示请求报错,此时建议您拆分待迁移的表,分批配置多个任务,或者配置整库的迁移任务。
- 单次迁移任务仅支持迁移至多10个数据库。当超出数量限制,会出现稳定性和性能问题的风险,此时建议您拆分待迁移的表,分批配置任务。
- 如需进行增量迁移,数据日志:
- 若源库待迁移的表需要开启CDC,则需满足以下条件,否则预检查将会失败。
- sys.sysservers视图的srvname字段与SERVERPROPERTY函数返回值保持一致。
- 若源库是自建SQL Server,则数据库所有者需是sa;若源库是RDS SQL Server,则数据库所有者需是sqlsa。
- 若源库是企业版,则需为2008及以上版本。
- 若源库是标准版,则需为2016SP1及以上版本。
- 若源库为SQL Server 2017版(包括标准版和企业版),建议升级版本。
- 源库的操作限制:
- 在库表结构迁移和全量迁移阶段,请勿执行库或表结构变更的DDL操作,否则数据迁移任务会失败。
- 如仅执行全量数据迁移,请勿向源实例中写入新的数据,否则会导致源和目标数据不一致。为实时保持数据一致性,建议选择结构迁移、全量数据迁移和增量数据迁移。
|
其他限制 | - 仅支持迁移基本数据类型的数据,不支持迁移TIMESTAMP、CURSOR、ROWVERSION、HIERACHYID、SQL_VARIANT、SPATIAL GEOMETRY、SPATIAL GEOGRAPHY、TABLE。
- 如在配置任务对象及高级配置时选择SQLServer增量同步模式为解析源库日志做增量同步,则待迁移的表需具备聚集索引,且聚集索引中需包含主键列;待迁移的表不支持堆表、无主键表、压缩表、含计算列表。在混合式日志解析模式下,没有如上限制。
- 为保障增量数据迁移延迟的准确性,解析源端日志做增量同步模式,DTS会在源库中新增一个名为dts_log_heart_beat的心跳表;混合式增量同步模式,DTS会在源库中创建触发器dts_cdc_sync_ddl、心跳表dts_sync_progress、DDL存储表dts_cdc_ddl_history以及会开启库级别CDC和部分表CDC,建议源端开启CDC的表数据变更量不超过1000 RPS。
- 由于云原生数据仓库AnalyticDB MySQL版本身的使用限制,当云原生数据仓库AnalyticDB MySQL版中的节点磁盘空间使用量超过80%,数据写入目标库的性能变慢,导致DTS任务延迟;当使用量超过90%,数据无法写入目标库,导致DTS任务异常。请提前根据待迁移的对象预估所需空间,确保目标集群具备充足的存储空间。
- 执行数据迁移前需评估源库和目标库的性能,同时建议业务低峰期执行数据迁移。否则全量数据迁移时DTS占用源和目标库一定读写资源,可能会导致数据库的负载上升。
- 由于全量数据迁移会并发执行INSERT操作,导致目标数据库的表产生碎片,因此全量迁移完成后目标数据库的表存储空间会比源实例的表存储空间大。
- 请确认DTS对数据类型为FLOAT或DOUBLE的列的迁移精度是否符合业务预期。DTS会通过
ROUND(COLUMN,PRECISION) 来读取这两类列的值。如果没有明确定义其精度,DTS对FLOAT的迁移精度为38位,对DOUBLE的迁移精度为308位。 - DTS会尝试恢复七天之内迁移失败任务。因此业务切换至目标实例前,请务必结束或释放该任务,或者将DTS访问目标实例账号的写权限用
revoke 命令回收掉。避免该任务被自动恢复后,源端数据覆盖目标实例的数据。 - 若迁移任务包含增量数据迁移,则不支持重建索引操作,否则可能造成任务失败,甚至数据丢失。
- 若单次迁移任务中开启CDC的表数量大于1000,则预检查会失败。
|
SQL Server迁移至云原生数据仓库AnalyticDB PostgreSQL版
类型 | 说明 |
---|
源库限制 | - 带宽要求:源库所属的服务器需具备足够出口带宽,否则将影响数据迁移速率。
- 待迁移的表需具备主键或唯一约束,且字段具有唯一性,否则可能会导致目标数据库中出现重复数据。
- 如迁移对象为表级别,且需进行编辑(如表列名映射),则单次迁移任务仅支持迁移至多1000张表。当超出数量限制,任务提交后会显示请求报错,此时建议您拆分待迁移的表,分批配置多个任务,或者配置整库的迁移任务。
- 单次迁移任务仅支持迁移至多10个数据库。当超出数量限制,会出现稳定性和性能问题的风险,此时建议您拆分待迁移的表,分批配置任务。
- 如需进行增量迁移,数据日志:
- 若源库待迁移的表需要开启CDC,则需满足以下条件,否则预检查将会失败。
- sys.sysservers视图的srvname字段与SERVERPROPERTY函数返回值保持一致。
- 若源库是自建SQL Server,则数据库所有者需是sa;若源库是RDS SQL Server,则数据库所有者需是sqlsa。
- 若源库是企业版,则需为2008及以上版本。
- 若源库是标准版,则需为2016SP1及以上版本。
- 若源库为SQL Server 2017版(包括标准版和企业版),建议升级版本。
- 源库的操作限制:
- 在库表结构迁移和全量迁移阶段,请勿执行库或表结构变更的DDL操作,否则数据迁移任务会失败。
- 如仅执行全量数据迁移,请勿向源实例中写入新的数据,否则会导致源和目标数据不一致。为实时保持数据一致性,建议选择结构迁移、全量数据迁移和增量数据迁移。
|
其他限制 | - 仅支持迁移基本数据类型的数据,不支持迁移TIMESTAMP、CURSOR、ROWVERSION、HIERACHYID、SQL_VARIANT、SPATIAL GEOMETRY、SPATIAL GEOGRAPHY、TABLE。
- 如在配置任务对象及高级配置时选择SQLServer增量同步模式为解析源库日志做增量同步,则待迁移的表需具备聚集索引,且聚集索引中需包含主键列;待迁移的表不支持堆表、无主键表、压缩表、含计算列表。在混合式日志解析模式下,没有如上限制。
- 为保障增量数据迁移延迟的准确性,解析源端日志做增量同步模式,DTS会在源库中新增一个名为dts_log_heart_beat的心跳表;混合式增量同步模式,DTS会在源库中创建触发器dts_cdc_sync_ddl、心跳表dts_sync_progress、DDL存储表dts_cdc_ddl_history以及会开启库级别CDC和部分表CDC,建议源端开启CDC的表数据变更量不超过1000 RPS。
- 执行数据迁移前需评估源库和目标库的性能,同时建议业务低峰期执行数据迁移。否则全量数据迁移时DTS占用源和目标库一定读写资源,可能会导致数据库的负载上升。
- 由于全量数据迁移会并发执行INSERT操作,导致目标数据库的表产生碎片,因此全量迁移完成后目标数据库的表存储空间会比源实例的表存储空间大。
- 请确认DTS对数据类型为FLOAT或DOUBLE的列的迁移精度是否符合业务预期。DTS会通过
ROUND(COLUMN,PRECISION) 来读取这两类列的值。如果没有明确定义其精度,DTS对FLOAT的迁移精度为38位,对DOUBLE的迁移精度为308位。 - DTS会尝试恢复七天之内迁移失败任务。因此业务切换至目标实例前,请务必结束或释放该任务,或者将DTS访问目标实例账号的写权限用
revoke 命令回收掉。避免该任务被自动恢复后,源端数据覆盖目标实例的数据。 - 若迁移任务包含增量数据迁移,则不支持重建索引操作,否则可能造成任务失败,甚至数据丢失。
- 若单次迁移任务中开启CDC的表数量大于1000,则预检查会失败。
|