检测到您已登录华为云国际站账号,为了您更好的体验,建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
创建DRS同步任务 本章节介绍创建DRS实例,将RDS for MySQL上的数据库增量同步到Kafka。 同步前检查 在创建任务前,需要针对同步条件进行手工自检,以确保您的同步任务更加顺畅。 本示例中,为RDS for MySQL到Kafka的出云同步,您可以参考出云同步使用须知获取相关信息。
reserved. Operation 'CREATE' is not permitted. 可能原因 “AUTO_PK_ROW_ID”列名是RDS for MySQL数据库的保留列名,用户无法创建。 解决方案 排查源库数据中列名含有“AUTO_PK_ROW_ID”的表,修改列名后,在任务列表中
接口约束 仅支持MySQL->MySQL、MySQL->PostgreSQL、MySQL->GaussDB分布式、MySQL->GaussDB主备、MySQL->GaussDB(DWS)、MySQL->GaussDB(for MySQL)、MySQL->Kafka、MySQL->CSS
程中在目标数据库MySQL 8.0.27版本中执行会报错,错误信息为“1221 - Incorrect usage of spatial/fulltext/hash index and explicit index order”, 错误原因为目标数据库MySQL 8.0.27版本不支持在全文索引上加排序语法规则。
mysql:他云/本地自建MySQL数据库。 ecs_mysql:华为云ECS自建MySQL数据库。 cloud_mysql:华为云数据库RDS for MySQL。 redis:云下自建Redis数据。 ecs_redis:华为云ECS自建Redis数据。 rediscluster:云下自建Redis集群数据库。
DRS可支持自建的MySQL数据库迁移吗? DRS支持的MySQL链路方向 自建MySQL到华为云RDS for MySQL。 华为云RDS for MySQL到自建MySQL。 DRS不支持链路方向 自建MySQL到自建MySQL 在华为云创建的ECS上自建的数据库,属于自建数据库。
操作流程 创建RDS for MySQL实例,并且将RDS for MySQL数据同步到DDM的主要任务流程如图1所示。 图1 流程图 父主题: RDS for MySQL迁移到DDM
数据订阅与MySQL到Kafka同步的区别 对比项 MySQL到Kafka同步 数据订阅 支持的源数据库 华为云RDS for MySQL 本地自建MySQL数据库 ECS自建MySQL数据库 其他云MySQL数据库 华为云RDS for MySQL 支持网络 支持公网网络、VPC网络、VPN、专线网络。
迁移结果。 直接登录数据库查看库、表、数据是否迁移完成。手工确认数据迁移情况,详情参见在DDM管理控制台查看迁移结果。 在DRS管理控制台查看迁移结果 登录华为云控制台。 单击管理控制台左上角的,选择区域“华北-北京四”。 单击左侧的服务列表图标,选择“数据库 > 数据复制服务 DRS”。
这种策略下,源库所有存储过程和方法的Definer迁移到目标库后账号都会自动修改为user1,host改为% 。若在目标库上出现调用存储过程失败的情况,可执行如下操作: 使用uesr1账号登录到目标库RDS for MySQL实例。 如果需要使用其他账号调用存储过程,则该账号需要具有execute权限。
客户选择了保留definer迁移,但是迁移账号又没有super权限。 解决方案 可参考RDS常见问题给目标库迁移账号增加super权限后重新提交任务,或者重建任务选择不迁移definer。 父主题: MySQL->MySQL实时迁移和同步
不支持外键级联操作。当外键是普通索引的时候,可能会导致表结构创建失败,建议改成唯一索引。 详见源端存在不支持的外键引用操作。 同名检查 除了MySQL系统数据库之外,目标数据库不能包含与源数据库同名的数据库。 详见目标数据库是否存在和源数据库同名的数据库。 表名规范检查 源数据库中的库名、表名
目标端Kafka准备 创建Kafka实例 创建Topic 父主题: RDS for MySQL同步到Kafka
MySQL账号迁移后权限显示多了反斜杠“\” 其他云MySQL使用DRS进行入云迁移后,迁移后的账号在RDS的控制台上显示带有反斜杠“\”。 迁移前在其他控制台查看,显示如下: 迁移后在RDS控制台查看,显示如下: 是因为MySQL GRANT语法支持通配符,详细可参考MySQL
在弹出的对话框中输入创建DDM账号中的实例用户名和密码,单击“测试连接”检查。 连接成功后单击“登录”,登录DDM实例。 单击创建逻辑库并关联RDS for MySQL实例中创建的逻辑库db_test_info。 在db_test_info库中执行如下语句,创建与源端结构一致的同名目标表db_test_info_001。
当时延为0s时,说明源数据库和目标数据库的数据是实时同步的。 时延 = 源库当前系统时间 - 成功同步到目标库的最新一个事务在源库的提交成功时间。 一个事务同步的完整过程如下: 源端数据库的抽取; 经过网络的传输; 由DRS进行日志解析; 最终在目标数据库上的执行完成。 这样完成
创建VPC和安全组 创建VPC和安全组,为创建RDS for MySQL和Kafka实例准备好网络资源和安全组。 创建VPC 登录华为云控制台。 单击管理控制台左上角的,选择区域“华南-广州”。 单击左侧的服务列表图标,选择“网络 > 虚拟私有云 VPC”。 进入虚拟私有云信息页面。
源端MySQL发生主备倒换,DRS任务会丢数据吗 如果源端MySQL已开启了GTID模式,在发生主备倒换时,DRS会记录binlog位点信息,在主备倒换后接续位点继续进行任务,不会丢数据。 源端MySQL可通过修改数据库配置文件方式将GTID开启,重启数据库后生效。 参考命令如下:
供对灾备中的任务进行暂停功能。 目前以下灾备链路支持暂停功能: MySQL->MySQL MySQL->GaussDB(for MySQL) GaussDB(for MySQL)>GaussDB(for MySQL) DDM->DDM 前提条件 已登录数据复制服务控制台。 灾备任务正常运行中。
创建和配置VPN网络 创建源端VPN 创建目标端VPN 修改源端VPN配置 父主题: RDS for MySQL迁移到DDM