检测到您已登录华为云国际站账号,为了您更好的体验,建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
户可以在DRS任务上手工触发回放,观察目标数据库的性能表现。也可以通过控制DRS录制回放的线程及回放速度,来模拟源业务流量放大的效果,从而分析目标数据库对于未来业务激增时的稳定性表现。
修改数据库后,到SDK的用户端消费一般有多长时间的延迟 如果用户消费没有延迟,1s内就可以收到这条变更。 父主题: 数据订阅
支持的数据库 数据复制服务支持多种数据源之间的数据流通,实时迁移、备份迁移、实时同步、数据订阅和实时灾备对不同数据库的支持情况如下所示。 实时迁移 实时迁移适用于跨云平台、云下数据库迁移上云或云上跨区域等多种业务场景的全部数据库对象迁移,其支持的数据库、版本和迁移类型如下所示,更多实时迁移的功能特性可参考实时迁移。
SDK使用说明 数据订阅功能将数据库中关键业务的数据变化信息缓存并提供统一的SDK接口,方便下游业务订阅、获取、并消费。 在使用SDK消费之前,需要先在数据复制服务控制台创建数据订阅任务。 当订阅任务创建完成后,使用SDK可以实时订阅订阅通道中的增量数据。目前: 数据复制服务只提供JAVA版本SDK,SDK下载地址。
降权处理的用户。 图2 账号权限 DRS支持数据库用户密码的迁移。 数据库用户密码的迁移可通过如下两种方式来处理。 由于DRS在迁移时不会分析您的密码数据和强度,源系统密码复杂度过弱则存在安全风险,为了确保迁移过程中数据的安全性,您可以根据业务需求,选择是否需要重新设置数据库用户
实例和跨区域的灾备实例之间的实时同步。 一次完整的数据灾备,是以任务作为导向,依次进行灾备进度观察、灾备日志分析、灾备数据一致性对比等多项操作。通过多项指标和数据的对比分析,可以帮助您实现不同业务系统间的数据同步。 使用流程 数据灾备的使用流程如下: 图1 数据灾备流程 步骤一:
有强事务要求,不推荐使用此选项。 按主键的hash值投递到不同的Partition:适用于单表数据量较大场景,避免该表都写到同一个分区,消费者可以并行从各分区获取数据,只在主键值不可变情况下能够做到数据最终保序。对于无主键表,如果选择“按主键的hash值投递都不同的partiti
有强事务要求,不推荐使用此选项。 按主键的hash值投递到不同的Partition:适用于单表数据量较大场景,避免该表都写到同一个分区,消费者可以并行从各分区获取数据,只在主键值不可变情况下能够做到数据最终保序。对于无主键表,如果选择“按主键的hash值投递都不同的partiti
增量同步失败报错,关键词“Topic *** not present in metadata after 300000 ms” 场景描述 Oracle->Kafka同步任务增量阶段报错,同步日志界面提示: service INCREMENT failed, cause by: Topic
增量同步失败报错,关键词“Failed to construct kafka producer. ” 场景描述 Oracle->Kafka同步任务增量阶段报错,同步日志界面提示:service INCREMENT failed, cause by: Failed to construct
在“实时灾备管理”界面,选中指定灾备任务,单击任务名称,进入“基本信息”页签。 单击“灾备对比”页签,进入“灾备对比”信息页面,对业务数据库和灾备数据库的数据进行对比分析。 首先进行数据库对象完整性检查。 在“对象级对比”页签,单击“开始对比”后稍等一段时间再单击,查看各个对比项的对比结果。 图1 对象级对比
数据订阅 支持的数据源类型 数据订阅支持的数据源类型包括: RDS for MySQL实例 支持的订阅对象 数据订阅的订阅对象可以为:表级订阅。 数据订阅将增量数据细分为数据变更(Data Manipulation Language 简称DML)和结构变更(Data Definition
在“实时迁移管理”界面,选中指定迁移任务,单击任务名称,进入“基本信息”页签。 单击“迁移对比”页签,进入“迁移对比”信息页面,对源数据库和目标数据库的数据进行对比分析。 您也可以在“实时迁移管理”界面,选中指定迁移任务,单击操作列的“查看对比”,进入“迁移对比”页面。 创建对象级对比:通过对象对比,先对数据库对象完整性进行检查。
数据订阅 修改数据库后,到SDK的用户端消费一般有多长时间的延迟 订阅SDK获取不到数据,且程序异常
任务管理 查看任务详情 修改任务信息 编辑订阅任务 查看订阅数据 修改消费时间点 续传订阅任务 重置订阅任务 删除订阅任务 任务状态说明
SDK接口介绍 SDK中定义了多种类对象,本小节简单介绍SDK的这些类的接口定义。 SubscribeContext接口定义 表1 SubscribeContext接口定义 函数名称 说明 setDomainName(String domainName) 设置用户名。 参数为创建所需数据订阅任务的IAM主账号名。
创建数据订阅任务 支持的数据库 表1 支持数据库信息 数据库引擎 支持订阅的数据类型 RDS for MySQL 5.6、5.7版本 数据更新 结构更新 由于订阅任务当前存在较多订阅对象和操作约束,推荐使用性能、稳定性更高的MySQL到Kafka同步链路进行数据订阅。 数据订阅与
的数据,超范围的数据可能导致任务异常,例如年份大于9999时会出现数据截断。 增量同步过程中,支持部分DDL操作。异构数据库DDL转换需要分析语义,考虑语法兼容性,无法做到完美转换,所以目前仅支持部分DDL操作,仅在转换成功并在以下范围内时会进行同步。如果出现其余情况的DDL同步
的数据,超范围的数据可能导致任务异常,例如年份大于9999时会出现数据截断。 增量同步过程中,支持部分DDL操作。异构数据库DDL转换需要分析语义,考虑语法兼容性,无法做到完美转换,所以目前仅支持部分DDL操作,仅在转换成功并在以下范围内时会进行同步。如果转换失败或执行失败会忽略
什么是SMN主题 什么是SMN 消息通知服务(Simple Message Notification,SMN)是可靠的、可扩展的、海量的消息处理服务。它可以依据用户的需求主动推送通知消息,最终用户可以通过短信、电子邮件、应用等方式接收。 对DRS而言 SMN为其他服务均可使用的通