检测到您已登录华为云国际站账号,为了您更好的体验,建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
MySQL->MySQL 本地自建MySQL数据库 ECS自建MySQL数据库 其他云上MySQL数据库 RDS for MySQL实例 单机实例 主备实例 入云 MySQL->TaurusDB 本地自建MySQL数据库 ECS自建MySQL数据库 其他云上MySQL数据库 TaurusDB实例
压缩技术是提升性能和解决数据膨胀的关键技术,DRS在数据传输和增量数据存储两大环节采用了压缩技术。 数据传输压缩:在网络带宽不理想的环境中,进行数据同步与传输,DRS可以开启压缩开关,以减少数据传输对带宽的占用量。 增量数据存储压缩:增量数据转储成逻辑文件后,将会出现膨胀现象,DRS针对该场景做了存储压缩技术,
源数据库建议开启skip-name-resolve,减少连接超时的可能性。 源数据库GTID状态建议为开启状态。 源库不支持mysql binlog dump命令。 源数据库和目标数据库字符集需保持一致,否则同步失败。 源数据库log_slave_updates参数需设置为开启状态,否则会导致同步失败。
任务状态说明 备份迁移提供了多种任务状态,以便区分不同阶段的迁移任务。 数据备份迁移任务的状态和说明,请参见表1。 表1 备份迁移任务状态和说明 状态 说明 恢复中 正在进行备份文件到目标数据库的迁移任务。 成功 备份文件到目标数据库的迁移任务执行成功。 失败 备份文件到目标数据库的迁移任务执行失败。
DK接口介绍。 网络排查:目前数据订阅仅支持VPC网络,但是不支持VPC内的容器网络。如果客户订阅端运行在容器环境中,因DRS安全原因,未开启全网段路由,因此可能会网络不通无法获取数据。 父主题: 数据订阅
可读写状态,此选项可有效的确保数据迁移的完整性和成功率,推荐此选项。 读写:迁移中,目标数据库可以读写。 是否开启Binlog快速清理 否 DRS任务运行期间,是否开启目标数据库实例的Binlog快速清理。 指定公网IP - 选择DRS实例的公网IP,网络准备中创建的公网IP 选择可用区和企业项目。
业务低峰期,合理设置同步任务的启动时间。 任务异常通知设置 该项为可选参数,开启之后,选择对应的SMN主题。当同步任务状态、时延指标或数据异常时,系统将发送通知。 SMN主题 “任务异常通知设置”项开启后可见,需提前在SMN上申请主题并添加订阅。 SMN主题申请和订阅可参考《消息通知服务用户指南》。
为什么实时灾备任务不支持触发器(TRIGGER)和事件(EVENT) 数据库的触发器(TRIGGER)和事件(EVENT)操作会记录binlog,DRS通过解析binlog同步数据,如果业务侧写入与触发器、事件存在同样对象,就会发生重复执行导致数据不一致或者任务失败,所以在灾备场景下,触发器和事件是不支持的。
源数据库的用户名所对应的密码。 SSL安全连接 通过该功能,用户可以选择是否开启对同步链路的加密。如果开启该功能,需要用户上传SSL CA根证书。 说明: 最大支持上传500KB的证书文件。 如果不启用SSL安全连接,请自行承担数据安全风险。 源数据库的IP地址或域名、数据库用户
概述 场景描述 本实践通过创建DRS同步任务,实现将源数据库RDS for MySQL的增量数据同步到目标端Kafka,主要包含以下部分内容: 介绍如何在华为云创建RDS for MySQL实例。 介绍如何在华为云创建分布式消息服务Kafka。 介绍如何创建DRS同步任务。 前提条件
编辑同步任务 已创建成功但是未确认启动的同步任务,数据复制服务支持编辑任务的配置信息,包括源库信息、目标库信息。创建实例后,对于如下状态的任务,您可进行编辑并提交同步任务。 创建中 配置 对于增量同步中的任务,数据复制服务支持通过编辑同步对象功能进行对象修改,详细操作可参考编辑同步对象。
如何判断数据迁移任务可以停止 您可参考以下方法,确认任务是否可以结束。结束之前您需要确认完成以下几点: 请您确认至少在业务低峰期有过一次完整的数据对比。 完成业务割接。 先中断业务(如果业务负载非常轻,也可以尝试不中断业务)。 在源数据库端执行如下语句(此处以MySQL为例),并
同步任务所在的子网。 同步模式 全量+增量 DRS的实时同步任务模式,分为全量+增量、全量、增量三种模式。 是否开启Binlog快速清理 否 DRS任务运行期间,是否开启目标数据库实例的Binlog快速清理。 指定公网IP - 选择DRS实例的公网IP,网络准备中创建的公网IP。 选择规格、可用区。
cloud_service_type String 用户购买云服务产品的云服务类型,例如EC2,云服务类型为hws.service.type.ec2。 resource_type String 用户购买云服务产品的资源类型,例如EC2中的VM,资源类型为hws.resource.type.vm。 resource_spec_code
28之间),需提交运维申请才能使用SSL测试连接。 使用限制 通用: 实时同步过程中,若源库为RDS时,支持修改端口,修改之后同步任务失败,需要通过重试后继续进行同步。 实时同步过程中,若源库为非RDS时,不支持修改端口。 实时同步过程中,不支持IP、账号、密码修改。 不允许源数据库进行恢复操作。 不支持强制清理Binlog。
越长越好,建议为3天。 源数据库expire_logs_days参数值为0,可能会导致同步失败。 源数据库GTID状态建议为开启状态,源数据库实例没有开启GTID的情况下不支持主备倒换,DRS任务会因为位点不续接而中断导致无法恢复。 必须设置MySQL源数据库的server_id
源数据库中不允许存在被禁用的聚集索引,如果存在可能会导致迁移失败。 不通过原因 源数据库中存在被禁用的聚集索引。 处理建议 通过执行如下操作,启用表中已禁用的索引: ALTER INDEX [索引名称] ON [表名] REBUILD; 父主题: 数据库参数检查
选择实例规格。 本示例中为测试实例,选择较小的测试规格,实际可选规格以界面为准。 选择实例所属的VPC和安全组(创建VPC和创建安全组),配置数据库端口。 配置实例密码等信息。 单击“立即购买”,确认信息并提交。 返回实例列表。 当实例运行状态为“正常”时,表示实例创建完成。 GaussDB实例构造数据
"region" : "cn-xianhz-1", "db_type" : "mysql", "db_port" : 3306, "ssl_link" : false, "project_id" : "054ba152d4
查看任务详情 实时迁移任务的配置信息,包括任务信息、迁移实例信息和迁移信息。迁移任务创建成功后,可查看迁移任务详细信息 。 前提条件 已登录数据复制服务控制台。 已成功创建迁移任务。 操作步骤 任务列表中,仅展示当前登录用户所创建的全部任务,同一租户下的不同用户之间的任务不可见。