检测到您已登录华为云国际站账号,为了您更好的体验,建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
GaussDB为源实时同步 任务启动失败报错,关键词“Initialize logical replication stream failed, the source database may have a long transaction: ****.” 增量同步失败报错,关键词“The
产生的增量数据持续同步至目标库中,直到手动任务结束。下面我们通过在源库RDS for MySQL中插入数据,查看Kafka的接收到的数据来验证同步结果。 操作步骤 登录华为云控制台。 单击管理控制台左上角的,选择区域“华南-广州”。 单击左侧的服务列表图标,选择“数据库 > 云数据库
测量对象:弹性云服务器 监控实例类型:实时迁移、实时同步和实时灾备实例 1分钟 apply_latency 数据同步延迟 该指标用于统计当前数据向目标库回放延迟,以毫秒为单位。 ≥ 0 ms 测量对象:弹性云服务器 监控实例类型:实时迁移、实时同步和实时灾备实例 1分钟 apply_average_execute_time
测量对象:弹性云服务器 监控实例类型:实时迁移、实时同步和实时灾备实例 1分钟 apply_latency 数据同步延迟 该指标用于统计当前数据向目标库回放延迟,以毫秒为单位。 ≥ 0 ms 测量对象:弹性云服务器 监控实例类型:实时迁移、实时同步和实时灾备实例 1分钟 apply_average_execute_time
批量查询RPO和RTO 功能介绍 批量查询RPO和RTO。 调试 您可以在API Explorer中调试该接口,支持自动认证鉴权。API Explorer可以自动生成SDK代码示例,并提供SDK代码示例调试功能。 URI POST /v3/{project_id}/jobs/batch-rpo-and-rto
跳过无主键表后出现表不存在导致DRS任务失败时,请先联系目标库运维工程师根据源数据库表结构和日志报错信息在目标库创建对应的表,然后单击任务对应操作列的“续传”,重新提交任务。 查看读写数据性能。单击“监控图表”查看读写数据性能,该图表展示了实时读取源库和写入目标库数据的速率,其单位为MB/s。 图3 性能监控 父主题:
批量更新迁移用户信息 功能介绍 数据库的迁移过程中,迁移用户需要进行单独处理,该接口可以批量设置需要迁移的用户和角色。 调试 您可以在API Explorer中调试该接口,支持自动认证鉴权。API Explorer可以自动生成SDK代码示例,并提供SDK代码示例调试功能。 接口约束 仅迁移场景、PostgreSQL同步支持。
操作流程 创建VPC和安全组 源端RDS for MySQL准备 目标端Kafka准备 创建DRS同步任务 确认同步任务执行结果 父主题: 实时同步
MySQL为源实时灾备 灾备阶段失败报错,关键词“A dml without pk write target db fail” 父主题: 失败案例
本地Oracle同步到DDM 概述 资源规划 操作流程 源端Oracle准备 目标端DDM准备 创建DRS同步任务 确认同步执行结果 父主题: 实时同步
r写入数据时,触发器会同步往另一个log表中写入一条日志数据。 当源库业务侧写入了一条数据到user表。 触发器同步了这条数据到log表,此时binlog中会有两条数据,如下图,第一条就是业务插入user表的数据,第二条是触发器被触发,写入到log中的数据。 DRS同步数据的时候可能会出现以下情况:
本实践使用DRS的实时同步功能将本地Oracle数据库实时同步至华为云DDM。通过全量+增量同步,实现源数据库Oracle和目标数据库DDM的数据长期同步。 前提条件 拥有华为云实名认证账号。 账户余额大于等于0元。 服务列表 虚拟私有云 VPC 分布式数据库中间件DDM 数据复制服务 DRS
测量对象:弹性云服务器 监控实例类型:实时迁移、实时同步和实时灾备实例 1分钟 apply_latency 数据同步延迟 该指标用于统计当前数据向目标库回放延迟,以毫秒为单位。 ≥ 0 ms 测量对象:弹性云服务器 监控实例类型:实时迁移、实时同步和实时灾备实例 1分钟 apply_average_execute_time
查询数据加工规则 功能介绍 查询数据加工规则:包含数据库表的映射信息、列信息、数据过滤信息、附加列信息、DDL以及DML信息。 调试 您可以在API Explorer中调试该接口,支持自动认证鉴权。API Explorer可以自动生成SDK代码示例,并提供SDK代码示例调试功能。
连接信息创建成功后,DRS支持再次编辑修改,可修改的任务信息如下: 任务名称 描述 数据库IP 数据库端口 数据库用户名 数据库密码 操作步骤 在“连接信息管理”页面的列表中,选择要修改的任务,单击操作列“编辑”按钮。 在“编辑连接信息”页面,修改数据库信息后,单击“保存并返回”。 父主题: 连接信息管理
当全量同步完成后,开始进行增量同步,可在“同步进度”页签下,查看增量同步时延。 增量时延也可在“实时同步管理”界面查看,当增量时延超过用户设置或系统默认的时延阈值时,任务管理界面增量时延显示为红色。 当时延为0s时,说明源数据库和目标数据库的数据是实时同步的。 时延 = 源库当前系统时间 - 成功同步到目标库的最新一个事务在源库的提交成功时间。
迁移日志记录了数据迁移过程中的信息,包含告警、错误和提示等类型的信息。迁移过程中,可以通过查看迁移日志信息,帮助您分析系统中存在的问题。操作日志记录了您创建任务、设置任务限速、任务启动等关键操作日志。 前提条件 已登录数据复制服务控制台。 已成功创建迁移任务。 操作步骤 在“实时迁移管理
- DRS同步任务 同步任务名 DRS-OracleToDDM 自定义,易理解可识别。 源数据库引擎 Oracle 本示例中源数据库为Oracle。 目标数据库引擎 DDM 本示例中目标数据库为DDM。 网络类型 公网网络 本示例中采用“公网网络”。 父主题: 本地Oracle同步到DDM
ECS自建MySQL迁移到TaurusDB 方案概述 前提条件 资源规划 操作流程 实施步骤 父主题: 实时迁移
MySQL->TaurusDB实时迁移和同步 全量或增量阶段失败报错,关键词“Illegal mix of collations (utf8mb4_0900_ai_ci,IMPLICIT) and (utf8mb4_general_ci,IMPLICIT) for operation”