检测到您已登录华为云国际站账号,为了您更好的体验,建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
什么是数据复制服务 数据复制服务(Data Replication Service,简称DRS)是一种易用、稳定、高效、用于数据库实时迁移和数据库实时同步的云服务。 数据复制服务围绕云数据库,降低了数据库之间数据流通的复杂性,有效地帮助您减少数据传输的成本。 您可通过数据复制服务
表4 params字段数据结构说明 参数 是否必选 参数类型 描述 key 是 String 数据库参数名。 target_value 是 String 目标数据库参数值。 响应参数 状态码: 202 表5 响应Body参数 参数 参数类型 描述 success Boolean 修改参数是否成功。
compare:表示数据对比的过滤。 枚举值: job compare process_rule_level 否 String 数据加工规则作用级别 table 表示数据同步时的过滤 combinations 表示组合集,对多个表的操作 当进行数据过滤规则校验,必填 当需要更新数据加工规则(数据过滤、列加工等)时,必填
采集数据库位点信息 功能介绍 采集数据库位点信息。 接口约束 目前仅支持MySQL->GaussDB(DWS)同步场景。 仅支持部分Region使用,详情参考终端节点。 URI POST /v5/{project_id}/jobs/{job_id}/collect-db-position
查看异常数据 同步过程中可能因数据冲突、数据加工、异构类型转化、对象缺失等因素导致数据异常,您可以通过“异常数据”页签查看,以帮助异常写入的排查。 GaussDB、PostgreSQL、Oracle为目标的支持异常数据类型: 违反非空约束 数据异常 数据右边被截断 唯一键冲突 MySQL为目标的支持异常数据类型:
compare process_rule_level String 数据加工规则作用级别 table 表示数据同步时的过滤 combinations 表示组合集,对多个表的操作 当进行数据过滤规则校验,必填 当需要更新数据加工规则(数据过滤、列加工等)时,必填 枚举值: table combinations
数据同步拓扑介绍 DRS实时同步功能目前支持多种拓扑类型,用户可根据自己的需求进行规划,详细说明可参考以下内容。 为保证同步数据的一致性,请勿对目标数据库中的同步对象进行修改操作。 一对一实时同步 用户创建一个同步任务来实现一对一的实时同步。 一对多实时同步 用户需要用户创建多个
查看灾备数据 灾备数据记录了灾备任务完成的记录,您可以通过该功能,了解灾备的完整性。 数据复制服务支持通过管理控制台查看灾备数据的初始化进度及数据健康报告。 前提条件 已登录数据复制服务管理控制台。 已成功创建数据灾备任务。 操作步骤 任务列表中,仅展示当前登录用户所创建的全部任
数据复制服务是否采用了并发技术 并发技术是提升性能的关键技术,DRS在多个环节采用了并发技术,总体可以分为两个大类并发技术:读写类并发和线程类并发。 读写类并发 为了提升全量阶段历史数据的搬迁,同时对抗网络的不稳定性,DRS实现了数据行级并发抽取效果,从而使得历史数据搬迁速度最大
同步前构造数据 同步前需要在源库构造一些数据类型,供同步完成后验证数据。 DRS支持的数据类型如下所示: 表1 数据类型映射关系 源库数据类型 目标库数据类型 源库数据类型做主键,同步能力 源库数据类型做非主键,同步能力 源库数据类型做主键,对比能力 源库数据类型做非主键,对比能力
目标数据库是否存在与源数据库同名的表 MySQL同步场景 表1 目标数据库是否存在与源数据库同名的表 预检查项 目标数据库是否存在与源数据库同名的表(表名冲突)。 描述 校验用户提供的目标数据库是否存在与源数据库同名的表,避免已存在的表被覆盖。若存在,则无法迁移。 特殊情况:如果
迁移前构造数据 迁移前需要在源库构造一些数据类型,供迁移完成后验证数据。 前提条件 已知源端数据库的IP地址,端口,账户和密码。 操作步骤 根据源端数据库的IP地址,通过数据库连接工具连接数据库。 根据支持的数据类型,在源库执行语句构造数据。 登录源端数据库。 进入任意一个待迁移的逻辑库。
处理建议 全量+增量的实时同步任务,修改源数据库,配置为主机。 全量实时同步任务,修改源数据库,配置为主机。或者在启动全量同步前,修改源库参数“hot_standby_feedback”为on,全量同步结束后,将该参数改回off。 父主题: 数据库参数检查
与其他服务关系 云数据库RDS 数据复制服务可将已有数据库迁移到本云云数据库RDS(Relational Database Service,简称RDS)。关系型数据库的更多信息,请参考《云数据库RDS用户指南》。 目前数据复制服务支持将如下场景的关系型数据库迁移到本云关系型数据库: VPC网络
确认数据迁移结果 确认升级迁移结果有两种方式: 方式一:(自动)在DRS管理控制台查看迁移结果。DRS会针对迁移对象、用户、数据等维度进行对比,从而给出迁移结果。 方式二:(手工)在RDS管理控制台查看迁移结果。直接登录数据库查看库、表、数据是否迁移完成。手工确认数据迁移情况。 在DRS管理控制台查看迁移结果
确认数据迁移结果 确认升级迁移结果有两种方式: 方式一:(自动)在DRS管理控制台查看迁移结果。DRS会针对迁移对象、用户、数据等维度进行对比,从而给出迁移结果。 方式二:(手工)在TaurusDB管理控制台查看迁移结果。直接登录数据库查看库、表、数据是否迁移完成。手工确认数据迁移情况。
objects 容灾监控数据响应体集合。 详情请参见表5。 count Integer 查询总数。 表5 results字段数据结构说明 参数 参数类型 描述 id String 任务ID。 data_guard_minitor object 灾备任务监控数据。 详情请参见表6。 表6
批量数据库对象选择 功能介绍 迁移之前,选择需要迁移的数据库或者表。 调试 您可以在API Explorer中调试该接口,支持自动认证鉴权。API Explorer可以自动生成SDK代码示例,并提供SDK代码示例调试功能。 接口约束 仅实时迁移、实时同步支持对象选择。 任务创建成
的连接数,正常的select count语句基本不会对数据库产生影响。但是如果表数据量巨大(亿级)会对数据库产生一定的查询压力,返回查询结果会比较慢。 内容对比:会查询源库及目标库的全部数据,涉及每个字段都会对比,所以会对数据库产生一定的查询压力,主要体现在IO上,查询速度受限于
compare:表示数据对比的过滤。 枚举值: job compare process_rule_level 否 String 数据加工规则作用级别 table 表示数据同步时的过滤 combinations 表示组合集,对多个表的操作 当进行数据过滤规则校验,必填 当需要更新数据加工规则(数据过滤、列加工等)时,必填