实时同步是指在不同的系统之间,将数据通过同步技术从一个数据源拷贝到其他数据库,并保持一致,实现关键业务的数据实时流动。 实时同步不同于迁移,迁移是以整体数据库搬迁为目的,而实时同步是维持不同业务之间的数据持续性流动。 常用场景:实时分析,报表系统,数仓环境。 特点:实时同步功能聚焦于表和数
时延 = 源库当前系统时间 - 成功同步到目标库的最新一个事务在源库的提交成功时间。 时延为0代表源和目标瞬时一致,无新的事务需要同步。 步骤三:对比迁移项 对于全量+增量迁移任务,当任务全量迁移完成进入增量阶段,并且增量时延为0时,用户可使用数据迁移提供的对比功能,确认源和目标数据库的数据是否一致性。
内容对比不支持哪些数据类型 DRS提供的数据比对功能可以清晰反馈出源数据库和目标数据库的数据是否存在差异。 目前对于以下数据类型,DRS不支持内容对比,进行内容对比时会自动跳过。 表1 不支持内容对比的数据类型 源数据库类型 数据类型 MySQL TINYBLOB、BLOB、ME
数据复制服务所提供的接口为REST(Representational State Transfer)风格API。通过使用DRS接口,您可以使用DRS的所有功能,包括创建迁移任务、获取任务详细信息、获取迁移任务列表、删除迁移任务等。 表1 v3接口说明 类型 子类型 说明 DRS接口 v3 配额 提供配额查询接口。
重置灾备任务 数据灾备过程中由于不确定因素导致灾备任务失败,可通过重置功能,重新提交灾备任务。 对于以下状态的任务,若灾备失败,可以重置灾备任务。 灾备失败 前提条件 已登录数据复制服务控制台。 方法一 在“实时灾备管理”页面的任务列表中,选择要启动的任务,单击操作列的“重置”。
进行一次演练,可以帮助您提前发现问题并解决问题。 建议您在启动任务时选择“稍后启动”功能,将启动时间设置在业务低峰期,避免同步对业务造成性能影响。如果同步不可避免业务高峰期,推荐使用同步限速功能,即“流速模式”选择“限速”。 在网络无瓶颈的情况下,全量同步会对源数据库增加约50M
查询任务详情 功能介绍 查询任务详情。 调试 您可以在API Explorer中调试该接口,支持自动认证鉴权。API Explorer可以自动生成SDK代码示例,并提供SDK代码示例调试功能。 接口约束 目前仅支持Redis->GeminiDB Redis迁移、Redis集群->GeminiDB
委托管理(新) 当用户创建DRS任务使用的是子账号,执行定时启动任务、全量完成自动结束、自动续传失败任务、定时对比任务等自动功能时,需要使用“账户委托”,否则会导致执行失败。 数据复制服务支持在创建任务的时候,自动将用户账户委托给数据复制服务的管理租户,即op_svc_rds,或
table> TO <user>; 目标库使用gsloader等工具创建相关系统表(如 public.pgxc_copy_error_log,public.gs_copy_summary)时,DRS访问相关系统表需要有系统表的all privilege权限,详细信息可参考《GaussDB工具参考》。
DRS是否支持同一实例不同库之间的同步 DRS实时同步可通过对象名映射功能,修改目标数据库对象名称,使数据库对象在源数据库和目标数据库中的命名不同,从而实现同一实例不同库之间的同步,详细说明可参考对象名映射。 父主题: 产品咨询
数据同步拓扑介绍 DRS实时同步功能目前支持多种拓扑类型,用户可根据自己的需求进行规划,详细说明可参考以下内容。 为保证同步数据的一致性,请勿对目标数据库中的同步对象进行修改操作。 一对一实时同步 用户创建一个同步任务来实现一对一的实时同步。 一对多实时同步 用户需要用户创建多个
批量异步创建任务 功能介绍 批量异步创建任务,根据请求参数不同,可以批量异步创建实时迁移、实时同步、实时灾备等任务。 调试 您可以在API Explorer中调试该接口,支持自动认证鉴权。API Explorer可以自动生成SDK代码示例,并提供SDK代码示例调试功能。 接口约束 目前仅支持Redis->GeminiDB
创建任务 功能介绍 创建单个任务,根据请求参数不同,可以创建单个实时迁移、实时同步、实时灾备等任务。 调试 您可以在API Explorer中调试该接口,支持自动认证鉴权。API Explorer可以自动生成SDK代码示例,并提供SDK代码示例调试功能。 接口约束 目前仅支持Redis->GeminiDB
支持按需计费和包年/包月。 支持按需计费和包年/包月。 更多特性 不同链路支持的功能特性也不相同,详情请参见对应链路使用须知。 不同链路支持的功能特性也不相同,详情请参见对应链路使用须知。 不同链路支持的功能特性也不相同,详情请参见对应链路使用须知。 父主题: 产品咨询
重置订阅任务 对于不确定因素导致的失败任务,当前任务中断时间过长,任务无法续传时,可使用重置功能,从当前时间点重新进行数据订阅,可以无需重新配置。 约束限制 任务重置并启动后,任务的开始时间点为当前时间,并非任务创建时间。 操作步骤 在“数据订阅管理”页面的任务列表中,选择要重置的任务,单击操作列“重置”按钮。
查询指定ID批量异步任务详情 功能介绍 查询租户指定ID批量异步任务详情,默认为任务的“create_time”降序排序获取结果,支持分页查询。 调试 您可以在API Explorer中调试该接口,支持自动认证鉴权。API Explorer可以自动生成SDK代码示例,并提供SDK代码示例调试功能。 接口约束
更新指定ID任务详情 功能介绍 更新租户指定ID任务详情。 调试 您可以在API Explorer中调试该接口,支持自动认证鉴权。API Explorer可以自动生成SDK代码示例,并提供SDK代码示例调试功能。 接口约束 目前仅支持Redis->GeminiDB Redis迁移、Redis集群->GeminiDB
更新指定ID批量异步任务详情 功能介绍 更新租户指定ID批量异步任务详情。 调试 您可以在API Explorer中调试该接口,支持自动认证鉴权。API Explorer可以自动生成SDK代码示例,并提供SDK代码示例调试功能。 接口约束 目前仅支持Redis->GeminiDB
如果校验对象在源数据库和目标数据库中的命名不同,可在右侧已选对象框中修改目标库对象映射名称,具体操作可参考对象名修改(对象名映射)。 使用非字母、非数字、非下划线等字符作为库表名称,或库表映射后名称包含中划线、井号时,名称的长度请不要超过42个字符。 选择导入对象文件,具体步骤和说明可参考导入同步对象。
数据订阅。 数据订阅与MySQL到Kafka同步的区别可参考这里。 更多到Kafka的同步链路可参考实时同步方案概览。 使用须知 数据订阅功能通过创建订阅任务来获取数据库中关键业务的数据变化信息,这类信息常常是下游业务所需要的。数据订阅将其缓存并提供统一的SDK接口,实现下游业务订阅、获取、并消费。
您即将访问非华为云网站,请注意账号财产安全