检测到您已登录华为云国际站账号,为了您更好的体验,建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
fka默认使用3副本),除了存储消息外还需要预留部分空间用于存储日志和元数据。 DRS同步任务 同步任务名 DRS-MySQLToKafka 自定义 源数据库引擎 MySQL 本示例中源数据库为MySQL,使用的华为云RDS实例。 目标数据库引擎 Kafka 本示例中目标数据库为Kafka。
Server的备份文件需要选择OBS桶目录下“.bak”格式的文件名,且可以同时选择多个备份文件。 不支持将一个库分割成不同文件上传。 该桶的桶名、备份文件名或者路径中不能包含中文。 当桶内数据超过500条,可能会造成数据溢出现象,导致部分数据无法展示,建议使用独立的标准桶,桶的权限为公共读。 在“选定
可能会导致数据乱码或者同步失败。 不通过原因 MySQL->GaussDB(DWS)同步场景,无主键表、空字符串迁移不支持DWS的ORA兼容模式。 MySQL->GaussDB同步场景,目标数据库不兼容MySQL。 处理建议 建议用DWS的MYSQL、TD的兼容模式或给无主键表加上主键。
for MySQL实例所属安全组的入方向规则,选择TCP协议,端口为生产中心RDS for MySQL实例的端口号。 图1 添加安全组规则 源库信息中的“IP地址或域名”填写生产中心RDS for MySQL实例绑定的EIP,“端口”填写生产中心RDS for MySQL实例的端口号。测试通过后,单击“下一步”。
量迁移是通过读取源数据库的原始增量日志数据(例如MySQL的Binlog)后解析转换进行 。 以MySQL的Binlog为例,部分他云只读MySQL备库的Binlog并不完整,会导致DRS无法进行增量数据同步。用户可使用mysqlbinlog下载并确认Binlog内容完整性。 下载命令:注意,该命令会把
DRS迁移任务 迁移任务名 DRS-TaurusDB 自定义 源数据库引擎 MySQL 本示例中源数据库为自建MySQL,即在华为云弹性云服务器上安装社区版MySQL。 目标数据库引擎 TaurusDB 本示例中目标数据库为华为云TaurusDB实例。 网络类型 公用网络 本示例中采用公用网络。
如果需要通过Java调用存储过程,则需要通过如下语句,使用user1授予其他账号查询mysql.proc表的权限。 授权语句可参考如下语句,user表示需要调用存储过程的账号: GRANT SELECT ON mysql.proc TO 'user'@'%'; 策略二 在测试连接页面的目标库信息中填写数据库用户名u
解决方案 可参考RDS常见问题给目标库迁移账号增加super权限后重新提交任务,或者重建任务选择不迁移definer。 父主题: MySQL->MySQL实时迁移和同步
单击管理控制台左上角的,选择目标区域。 单击左侧的服务列表图标,选择“数据库 > 云数据库RDS”。 单击迁移的目标实例的操作列的“登录”。 在弹出的对话框中输入密码,单击“测试连接”。 测试连接成功后,单击“登录”。 查看并确认目标库名和表名等。确认相关数据是否迁移完成。 进行性能测试 迁移完成后,可
MySQL->TaurusDB实时迁移和同步 全量或增量阶段失败报错,关键词“Illegal mix of collations (utf8mb4_0900_ai_ci,IMPLICIT) and (utf8mb4_general_ci,IMPLICIT) for operation”
参考DRS使用须知。 操作步骤 登录华为云控制台。 单击管理控制台左上角的,选择区域。 单击左侧的服务列表图标,选择“数据库 > 分布式数据库中间件 DDM”,进入DDM管理控制台。 在实例管理页面,单击实例对应操作栏的“登录”。 在弹出的对话框中输入创建DDM账号中的实例用户名和密码,单击“测试连接”检查。
户可以将任务基本信息、源库和目标库信息、以及待同步的对象等信息填写到模板中,再进行导入,批量创建同步任务。 约束限制 目前仅支持引擎为MySQL->MySQL、MySQL->GaussDB集中式版、MySQL->GaussDB分布式版、Oracle->GaussDB集中式版、Or
果目标数据库对于源数据库中执行SQL中有不支持的语法约束,那么DRS任务将会报错并失败。 例如以下几种源数据库和目标数据库的语法不兼容的场景(非全部场景): 源数据库MySQL 5.7.34版本中执行create table t1 (id int, c1 varchar(16),
RDS for MySQL迁移到DDM 概述 资源规划 操作流程 源端RDS for MySQL准备 目标端DDM准备 创建和配置VPN网络 创建DRS迁移任务 确认迁移执行结果 父主题: 实时迁移
目标库实例解除只读 对于运行中的迁移任务,数据复制服务支持解除目标数据库的只读状态。 约束限制 目前仅支持MySQL->MySQL、MySQL->TaurusDB、MongoDB->DDS的迁移入云任务在运行时解除目标库只读。 解除目标库只读可能导致数据不一致,请谨慎操作。 解除
RDS for MySQL同步到Kafka 概述 资源和成本规划 操作流程 创建VPC和安全组 源端RDS for MySQL准备 目标端Kafka准备 创建DRS同步任务 确认同步任务执行结果 父主题: 实时同步
索引名是否支持 校验同步对象的索引名称是否符合规范,索引名规则: 不支持大写字母 不能包括 , /, *, ?, ", <, >, |, 空格, 逗号, # 支持使用冒号: 不能以这些字符-, _, + 开头 不能包括 . 或 … 长度不能超过 255 个字符 不通过原因 存在不支持索引名。
为什么MariaDB和SysDB下的数据不迁移或同步 背景 由于某些MariaDB的版本把SysDB库作为其系统库(类似于MySQL官方版5.7的sys库),所以DRS默认也将SysDB作为所有MariaDB的系统库来处理(等同于MySQL、information_schema、performance_schema等库)。
同步至目标库中,直到手动任务结束。下面我们通过在源库RDS for MySQL中插入数据,查看Kafka的接收到的数据来验证同步结果。 操作步骤 登录华为云控制台。 单击管理控制台左上角的,选择区域“华南-广州”。 单击左侧的服务列表图标,选择“数据库 > 云数据库 RDS””。
在增量同步过程中,目标数据库关闭了SSL安全连接,导致DRS任务失败。 解决方案 开启目标数据库SSL安全连接。 在任务列表中,单击任务对应操作列的“续传”,继续同步任务。 父主题: MySQL->CSS/ES实时同步