检测到您已登录华为云国际站账号,为了您更好的体验,建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
DRS实时同步支持使用Online DDL工具吗 使用场景 MySQL为源的迁移或同步任务,在增量阶段使用第三方拷表方式实现的Online DDL工具(如PT-OSC、GH-OST)在源库执行DDL,会先创建临时表,通过临时表做DDL,针对这个情况,使用DRS进行迁移或同步时,可分为以下三种场景:
不支持内容对比的表可以使用行数对比功能。所以数据级对比功能需要结合业务场景,选用行数对比或者内容对比。 DRS进行内容比对期间不能暂停DRS任务,否则可能导致比对任务失败。 部分数据类型不支持内容对比,详情参考内容对比不支持哪些数据类型。 为避免占用资源,DRS限制对比任务的时长,超过限制时长,对比任务自动停止。
LOB对比策略:分为忽略LOB比对、比对长度、比对hash、和比对内容四种。 目前仅支持Oracle->GaussDB设置LOB对比策略。 忽略LOB比对:内容比对时忽略LOB字段。建议选择忽略LOB比对,LOB比对可能会对数据库产生一定的压力,压力大小取决于LOB比对方式和数据量的大小,
GaussDB分布式版为源任务序列值同步 GaussDB分布式版为源任务暂不支持同步序列值,如果同步的表中存在关联的序列,需要在任务结束后,参考以下内容手动同步序列值。 操作步骤 使用DRS同步任务测试连接时的用户登录GaussDB分布式版实例。 执行如下语句,查询库中具有管理序列的表及其关联的序列。
DRS发送Kafka消息序列化方式是什么 DRS发送到Kafka的数据,key序列化器是org.apache.kafka.common.serialization.StringSerializer,value序列化器是org.apache.kafka.common.serialization
不支持内容对比的表可以使用行数对比功能。所以数据级对比功能需要结合业务场景,选用行数对比或者内容对比。 DRS进行内容比对期间不能暂停DRS任务,否则可能导致比对任务失败。 部分数据类型不支持内容对比,详情参考内容对比不支持哪些数据类型。 为避免占用资源,DRS对行对比的时长进行
获取健康对比对象级对比概览 功能介绍 获取健康对比对象级对比概览。 URI GET /v5/{project_id}/jobs/{job_id}/health-compare-jobs/object/{compare_job_id} 表1 路径参数 参数 是否必选 参数类型 描述
内容对比不支持哪些数据类型 DRS提供的数据比对功能可以清晰反馈出源数据库和目标数据库的数据是否存在差异。 目前对于以下数据类型,DRS不支持内容对比,进行内容对比时会自动跳过。 表1 不支持内容对比的数据类型 源数据库类型 数据类型 MySQL TINYBLOB、BLOB、ME
PostgreSQL为源强制结束任务 本小节介绍PostgreSQL为源的同步链路在强制结束任务后,如何清理源库逻辑复制槽、如何同步序列值以及如何在源数据库已经无法连接的情况下,重置目标库中自增或自减列关联序列的序列值。 复制槽名命名规则为“drs_唯一性标识”。其中唯一性标识需要将任务node id中的“-”替换为“_”获取,node
行数对比任务结果不一致,目标数据库执行SQL超时 操作场景 数据级行对比不一致,提示"目标数据库执行SQL超时"。 图1 对比不一致 问题分析 由于比对的表数据量比较大,行比对超时,默认超时时间1小时。 解决方案 重新进行行对比。 拆分需要进行对比的表,分批多次进行对比。 如果以上操作不能解决问题,可在管理控制台右上角,选择“工单
Service,简称DRS)是一种易用、稳定、高效、用于数据库在线迁移和数据库实时同步的云服务。 图说DRS 立即体验 产品介绍 成长地图 由浅入深,带您玩转DRS 01 了解 数据复制服务(Data Replication Service,简称DRS)是一种易用、稳定、高效、用于数据库在线迁移和数据库实时同步的云服务。
入门实践 当您完成了账号、权限、数据库、网络等基本准备工作后,可以根据自身的业务需求使用DRS提供的一系列常用实践。 表1 DRS常用实践 场景 案例 描述 创建任务 实时迁移 其他云MySQL迁移到云数据库 RDS for MySQL 本实践介绍通过公网网络,使用DRS将其他云的MySQL数据迁移到华为云RDS
入门实践 当您完成了账号、权限、数据库、网络等基本准备工作后,可以根据自身的业务需求使用DRS提供的一系列常用实践。 表1 DRS常用实践 场景 案例 描述 创建任务 实时迁移 其他云MySQL迁移到云数据库 RDS for MySQL 本实践介绍通过公网网络,使用DRS将其他云的MySQL数据迁移到华为云RDS
启动全量迁移任务。 全量迁移完成后自动进入增量同步,从全量迁移开始抽取的位点开始回放。 当增量回放全部完成后,启动比对任务进行一致性检查,支持实时比对。 实时比对数据一致时,可以启动业务割接。 服务列表 虚拟私有云 VPC 云数据库 GaussDB 数据复制服务 DRS 数据管理服务
务失败。 如果使用serverName@database@table作为附加列,后续在进行数据对比时,目标端将默认使用该附加列作为行比对、内容比对的隐含过滤条件。 有附加列的表,增量阶段不支持对表做drop table然后create table的DDL操作。 多对一映射场景,再
数据库的数据导出成备份文件,并上传至对象存储服务,然后恢复到目标数据库。备份迁移可以帮助您在云服务不触碰源数据库的情况下,实现数据迁移。 常用场景:云下数据库迁移上云。 特点:云服务无需碰触源数据库,实现数据迁移。 图1 备份迁移 支持的数据库类型 目前,DRS备份迁移支持的源数据库和目标数据库类型,如表1所示。
余度,自减序列值为源库序列值-安全余度,安全余度默认为10000),若选择了同步用户,任务结束时将自动同步用户的成员关系。 全量实时同步任务结束时会对序列值进行比对,序列值采用逻辑一致性的判断原则,即自增序列当且仅当目标库对应序列值大于等于源库对应序列值,自减序列当且仅当目标库对
全余度,自减序列值为源库序列值-安全余度,安全余度默认为10000),若选择了同步用户,任务结束时将自动同步用户的成员关系。 全量实时同步任务结束时会对序列值进行比对,序列值采用逻辑一致性的判断原则,即自增序列当且仅当目标库对应序列值大于等于源库对应序列值,自减序列当且仅当目标库
任务正常结束 结束时将自动删除任务在源库创建的流复制槽。 结束任务时,如果目标库同步表中已关联序列,DRS将自动重置目标库序列值。重置的自增序列值为源库序列值+安全余度,自减序列值为源库序列值-安全余度,安全余度默认为10000。 任务强制结束 强制结束同步任务,需要手动删除源库可
任务正常结束 结束时将自动删除任务在源库创建的流复制槽。 结束任务时,如果目标库同步表中已关联序列,DRS将自动重置目标库序列值。重置的自增序列值为源库序列值+安全余度,自减序列值为源库序列值-安全余度,安全余度默认为10000。 任务强制结束 强制结束同步任务,需要手动删除源库可