检测到您已登录华为云国际站账号,为了您更好的体验,建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
支持的源和目标数据库 表1 支持的数据库 源数据库 目标数据库 本地自建MySQL数据库(MySQL 5.5、5.6、5.7、8.0版本) ECS自建MySQL数据库(MySQL 5.5、5.6、5.7、8.0版本) 其他云上MySQL数据库(MySQL 5.5、5.6、5.7、8.0版本)
源库对单一表或单一行的高频更新也会导致热点更新,从而导致时延增大。以RDS for MySQL为例,可以通过RDS的审计日志进行确认,详情可参考RDS审计日志。 原因7:网络不稳定导致的时延增大。 解决方法 解决方法1:针对这种情况,DRS会自动追平时延,无需处理,用户可观察增量时延是否降低。
(`id`)); 源数据库要求 源数据库必须为GaussDB(for MySQL)主备实例的主节点。 增量同步时,源数据库的binlog日志必须打开,且binlog日志格式必须为Row格式。 在磁盘空间允许的情况下,建议源数据库binlog保存时间越长越好,建议为3天。 源数据库expire
录制回放主要分为录制、回放两个阶段,录制过程是从源数据库上将所需时间段内的全部SQL原语句(包括增、删、改、查)通过binlog下载、录制工具等进行采集,以文件形式缓存起来,并往目标数据库注入模拟数据,等待用户执行回放;用户可以在DRS任务上手工触发回放,观察目标数据库的性能表现。 常用场景: 数
公网模式下,DDM和DDM绑定的RDS for MySQL实例都必须绑定EIP。 DDM绑定的RDS for MySQL实例的binlog日志必须打开,且binlog日志格式必须为Row格式并打开GTID。 在磁盘空间允许的情况下,建议业务数据库binlog保存时间越长越好,建议为7天。 业务
多对一场景下,选择表级同步时,如果要对已保存的库映射名称进行修改,需展开库进行操作。 源库和目标库多对一的表的结构要一致。 选择“导入对象文件”,具体步骤和说明可参考导入同步对象。文件导入对象也支持多张表对一张表的映射,由于消息体限制最多导入10000个表(表名长度过长或者规则过长也会影响导入数量)。
一性标识”。其中唯一性标识需要将任务node id中的“-”替换为“_”获取,node id可在DRS任务同步日志页面查看“task node id is ***”日志找到。 前提条件 已登录数据复制服务控制台。 账户余额大于等于0元。 满足实时同步支持的数据库类型和版本,详情请参见支持的数据库。
000277:805。文件名只能为1-60个字符且不能包含< > & : " ' / \\ 特殊字符,文件编号只能为3-20个数字,binlog事件位置只能为1-20个数字,且总长度不能超过100个字符。格式为:文件名.文件编号:事件位点。 MongoDB为源的任务,任务的源库日志从位点开始
b_buffer_pool、ib_doublewrite、ibdata1、ibtmp1。 增量同步时,源数据库的binlog日志必须打开,且binlog日志格式必须为Row格式。 在磁盘空间允许的情况下,建议源数据库binlog保存时间越长越好,建议为3天。 源数据库expire
全量+增量:该模式为数据库持续性同步,适用于对业务中断敏感的场景,通过全量同步过程完成目标端数据库的初始化后,增量同步阶段通过解析日志等技术,将源端和目标端数据库保持数据持续一致。 “增量”: 增量同步通过解析日志等技术,将源端产生的增量数据同步至目标端。 指定公网IP 网络类型选择“公网网络”时可见,选择为D
一性标识”。其中唯一性标识需要将任务node id中的“-”替换为“_”获取,node id可在DRS任务同步日志页面查看“task node id is ***”日志找到。 前提条件 已登录数据复制服务控制台。 账户余额大于等于0元。 满足实时同步支持的数据库类型和版本,详情请参见支持的数据库。
请求方法 请求方法 说明 GET 请求服务器返回指定资源。 PUT 请求服务器更新指定资源。 POST 请求服务器新增资源或执行特殊操作。 DELETE 请求服务器删除指定资源,如删除对象等。 HEAD 请求服务器资源头部。 PATCH 请求服务器更新资源的部分内容。当资源不存在的时
本升级后数据、表结构、关键字等信息均可能会产生兼容性改变),建议在该场景下重建灾备任务。 MySQL业务数据库的binlog日志必须打开,且binlog日志格式必须为Row格式。 在磁盘空间允许的情况下,建议业务数据库binlog保存时间越长越好,建议为7天。 自建MySQL可以
VPC1的EIP访问公网。您可以通过使用NAT网关服务或配置SNAT服务器,使得VPC2下的弹性云服务器可以通过VPC1下绑定了EIP的弹性云服务器访问Internet。具体实现方式请参见无公网IP的弹性云服务器访问Internet。 具体设置VPC对等连接的方法,可参考《虚拟私有云用户指南》。
- 存储空间 高I/O,200GB 存储空间主要用于存储消息(包含副本,Kafka默认使用3副本),除了存储消息外还需要预留部分空间用于存储日志和元数据。 DRS同步任务 同步任务名 DRS-MySQLToKafka 自定义 源数据库引擎 MySQL 本示例中源数据库为MySQL,使用的华为云RDS实例。
义函数,但目标数据库不支持创建自定义函数,可能会导致迁移失败。 待确认原因 目标数据库不支持自定义函数 处理建议 请检查目标库my.cnf文件中是否存在参数log_bin_trust_function_creators=on,如果不存在则在my.cnf中加上该参数, 并重启目标数据库使之生效。
本地自建Codis集群(开源Codis 3.0及以上版本) ECS自建Codis集群(开源Codis 3.0及以上版本) 本地自建Redis单机版(2.8.x、3.0.x、3.2.x、4.0.x、5.0.x版本) ECS自建Redis单机版(2.8.x、3.0.x、3.2.x、4
别测试并确定与源库和目标库连通后,勾选协议,单击“下一步”。 自建DNS服务配置(选填) 图5 自建DNS服务器 表9 自建DNS信息 参数 描述 是否配置自建DNS服务器 当用户需要填写自建的内网域名数据库地址作为源或者目标库时,请开启此选项。 自建DNS服务IP 填写用户自建的DNS服务IP信息。
化后,增量同步阶段通过解析日志等技术,将源端和目标端数据保持数据持续一致。 “全量”: 该模式为数据库一次性同步,适用于可中断业务的数据库同步场景,全量同步将非系统数据库的全部数据库对象和数据一次性同步至目标端数据库。 “增量”: 增量同步通过解析日志等技术,将源端产生的增量数据同步至目标端。
全量+增量:该模式为数据库持续性同步,适用于对业务中断敏感的场景,通过全量同步过程完成目标端数据库的初始化后,增量同步阶段通过解析日志等技术,将源端和目标端数据库保持数据持续一致。 “增量”: 增量同步通过解析日志等技术,将源端产生的增量数据同步至目标端。 是否开启Binlog快速清理 选择是否开启目标数据库实