检测到您已登录华为云国际站账号,为了您更好的体验,建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
同步对象约束 支持表数据的同步。 不支持数据库、视图、索引、约束、函数、存储过程、触发器(TRIGGER)和事件(EVENT)的同步。 不支持系统库的同步以及事件状态的同步。 不支持主键为FLOAT类型的表的同步。 不支持无主键表的同步。 全量和增量同步不支持隐藏列(INVISIBLE),隐藏列是MySQL
MySQL)要求--后必须跟空格。 操作步骤 本小节以Oracle到GaussDB(for MySQL)的实时同步为示例,介绍如何使用数据复制服务配置实时同步任务。 在“实时同步管理”页面,单击“创建同步任务”。 在“同步实例”页面,填选区域、项目、任务名称、描述、同步实例信息,单击“开始创建”。
如有中文、日文等特殊字符,业务连接Oracle数据库使用的编码需和Oracle数据库服务端编码一致,否则目标库会出现乱码。 Oracle中实时同步到kafka后的字符集为UTF8。 Oracle归档日志文件大小必须大于单条数据最大值,避免单条数据日志跨文件(超过2个日志文件)导致的增量数据解析异常。
支持数据库、表、用户、视图、索引、约束、函数、存储过程、触发器(trigger)和事件(event)的迁移。 仅支持MyISAM和InnoDB表的迁移。 不支持系统库的迁移以及事件状态的迁移。 - 无主键表检查 由于无主键表的性能低于主键表的性能,建议将无主键表修改为主键表。 详见源库无主键表检查。 关联对象检查
集群:目前只支持集合(包括验证器,是否是固定集合),分片键,索引和视图的迁移。 单节点:目前只支持集合(包括验证器,是否是固定集合),索引和视图的迁移。 不支持迁移系统库(如local、admin、config等)的迁移,用户名和角色需要在目标库手动创建。 不支持视图的创建语句中有正则表达式。 不支持_id字段没有索引的集合。
MySQL、GaussDB(for MySQL)为源链路,源数据库中的虚拟列不支持内容对比,对比时会过滤虚拟列。 对数据库影响 对象对比:会查询源库及目标库的系统表,占用10个左右的session的连接数,正常情况不会对数据库产生影响。但是如果对象数量巨大(比如几十万张表),可能会对数据库产生一定的查询压力。
库的端口号。 迁移过程中,不允许对正在迁移中的目标数据库进行修改操作。 前提条件 已登录数据复制服务控制台。 账户余额大于等于0元。 满足实时迁移支持的数据库类型和版本,详情请参见支持的数据库。 当用户创建DRS任务使用的是子账号时,请先确认已添加过委托。创建委托方法,可参考委托管理。
库的端口号。 同步过程中,不允许对正在同步中的目标数据库进行修改操作。 前提条件 已登录数据复制服务控制台。 账户余额大于等于0元。 满足实时同步支持的数据库类型和版本,详情请参见支持的数据库。 当用户创建DRS任务使用的是子账号时,请先确认已添加过委托。创建委托方法,可参考委托管理。
Service,以下简称DDS)实例。通过DRS提供的实时迁移任务,实现在数据库迁移过程中业务和数据库不停机,业务中断时间最小化。 本章节主要介绍了通过DRS将其他云数据库实时迁移至本云DDS的任务配置流程。包括以下迁移场景: 其他云MongoDB数据库实时迁移至本云DDS。 其他云内云主机自建
在创建灾备任务前,请务必阅读以下使用须知。 表3 环境要求 类型 使用和操作限制 灾备对象约束 仅支持MyISAM和InnoDB表的灾备。 不支持对系统库下自定义对象有操作权限的账号灾备。 不支持系统表。 不支持触发器和事件的灾备。 不支持指定部分业务库进行灾备。 不支持DDM层面的账号权限灾备。 不支持宽松模式
相互关联的数据对象要确保同时同步,避免因关联对象缺失,导致同步失败。常见的关联关系:索引引用表等。 网络中断在30秒内恢复的,不影响实时同步实时同步,如果超过30秒,则会导致同步任务失败。 在MySQL中,同一个database(schema)下面的不同表可以存在相同的索引名或
实例选择在“华北-北京四”新创建的RDS for MySQL灾备实例,单击“开始创建”,开始创建灾备实例。 图1 设置灾备实例信息 返回“实时灾备管理”页面,可以看到新创建的灾备实例。 父主题: 搭建容灾关系
到目标库。 操作步骤 本小节以GaussDB(for MySQL)到GaussDB(for MySQL)的实时同步为示例,介绍如何使用数据复制服务配置实时同步任务。 在“实时同步管理”页面,单击“创建同步任务”。 在“同步实例”页面,填选区域、项目、任务名称、描述、同步实例信息,单击“开始创建”。
数据,请使用Kafka数据中的id字段进行去重。 结束任务须知 正常结束任务: 全量+增量实时同步任务正常结束时,将自动删除任务在源库创建的流复制槽。 强制结束任务: 强制结束全量+增量实时同步任务,需要手动删除源库可能残留的复制槽,可参考PostgreSQL为源强制结束任务章节的指导进行操作。
table> TO <user>; 目标库使用gsloader等工具创建相关系统表(如 public.pgxc_copy_error_log,public.gs_copy_summary)时,DRS访问相关系统表需要有系统表的all privilege权限,详细信息可参考《GaussDB工具参考》。
2 4vCPUs|8GiB 本示例中选择的规格。 实际选择的规格需要结合业务场景选择,请参考弹性云服务器的实例规格。 操作系统 CentOS 7.6 64 - 系统盘 通用型SSD 40GiB - 数据盘 超高IO 100GiB - 弹性IP 现在购买 因为迁移任务会选择“公网网络”,因此此处需要购买弹性IP。
操作流程 创建VPC和安全组 源端RDS for MySQL准备 目标端Kafka准备 创建DRS同步任务 确认同步任务执行结果 父主题: 实时同步
已创建同步任务。 方法一 在“基本信息”页签的“限速信息”区域,单击“修改”。 在弹出的对话框中修改流速模式。 图1 修改流速模式 方法二 在“实时同步管理”页面的同步列表中,选择需要修改流速模式的任务,单击操作列的“更多>限速”,或“限速”。 图2 任务列表 在弹出的对话框中修改流速模式。
修改IP功能适用于源库IP地址变化场景,修改前后的IP必须属于同一个数据实例,否则可能导致任务失败或者数据不一致。 连接信息修改后,将实时生效,不会清空目标数据库的数据。 操作步骤 在“实时同步管理”界面,选中指定同步任务,单击任务名称。 进入“基本信息”页签,在“连接信息”模块下,单击“修改连接信息”。
跳过DDL 对于目标数据库为GaussDB(DWS)的实时同步链路,增量阶段在源数据库执行的DDL操作时,DRS将原样在GaussDB(DWS)里执行。当目标数据库GaussDB(DWS)不支持该DDL语句时,会导致同步任务暂时故障。 针对这种情况,用户根据同步日志信息解决问题后,可以通过跳过DDL功能继续同步。