检测到您已登录华为云国际站账号,为了您更好的体验,建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
图解数据复制服务 DRS简介 DRS五大功能 DRS数据对比 DRS用户权限迁移
DRS对比任务对数据库有什么影响 对象对比:会查询源库及目标库的系统表,占用10个左右的session的连接数,正常情况不会对数据库产生影响。但是如果对象数量巨大(比如几十万张表),可能会对数据库产生一定的查询压力。 行数对比:会查询源库及目标库的表行数,占用10个左右的session
SDK接口介绍 SDK中定义了多种类对象,本小节简单介绍SDK的这些类的接口定义。 SubscribeContext接口定义 表1 SubscribeContext接口定义 函数名称 说明 setDomainName(String domainName) 设置用户名。 参数为创建所需数据订阅任务的
索引名是否支持 表结构一致性检查 存在约束不验证添加前数据 目标库附加列检查 主备库是否开启隐式主键检查 源库表复制属性检查 源库指定名称的复制槽是否存在 实例类型是否匹配迁移模式 物理复制库检查 目标库大小写敏感检查 源库表是否开启了CDC 源库CDC数据保留时间是否足够 源库服务器计算机名是否一致
ecs_oracle:华为云ECS自建Oracle数据库。 cloud_gaussdbv5:华为云数据库GaussDB分布式。 mysql:他云/本地自建MySQL数据库。 ecs_mysql:华为云ECS自建MySQL数据库。
增量阶段失败报错,关键词“Unknown table” 场景描述 增量迁移或同步期间DRS任务报错,日志提示信息:service INCREMENT failed, cause by: Unknown table '%s'; sql is%s 可能原因 目标库不存在这张表。 解决方案
源库信息 图5 源库信息页面 表9 源库信息 参数 描述 数据库类型 源数据库类型可以为“ECS自建库”或“DDS实例”,本示例选择“DDS实例”。 VPC 源数据库类型选择“ECS自建库”可见,指源数据库实例所在的虚拟专用网络,可以对不同业务进行网络隔离。
如何将源数据库的用户与权限导出,再导入到目标数据库 选择一台可以访问源数据库的虚拟机。 执行如下命令后,输入密码并回车,将源库用户导出到临时文件“users.sql”中。
数据复制服务是否采用了压缩技术 压缩技术是提升性能和解决数据膨胀的关键技术,DRS在数据传输和增量数据存储两大环节采用了压缩技术。 数据传输压缩:在网络带宽不理想的环境中,进行数据同步与传输,DRS可以开启压缩开关,以减少数据传输对带宽的占用量。 增量数据存储压缩:增量数据转储成逻辑文件后
数据复制服务有哪些安全保障措施 网络 使用安全组确保访问源可信。 使用SSL通道,确保数据传输加密。 管理 通过统一身份认证服务(Identity and Access Management,简称IAM),可以实现对数据复制服务的管理权限控制。 父主题: 网络及安全
数据复制服务是否采用了并发技术 并发技术是提升性能的关键技术,DRS在多个环节采用了并发技术,总体可以分为两个大类并发技术:读写类并发和线程类并发。 读写类并发 为了提升全量阶段历史数据的搬迁,同时对抗网络的不稳定性,DRS实现了数据行级并发抽取效果,从而使得历史数据搬迁速度最大化
场景一:ECS自建库源库信息配置 图5 ECS自建库场景源库信息 表9 ECS自建库场景源库信息 参数 描述 源库类型 选择“ECS自建库”。 VPC 源数据库实例所在的虚拟专用网络,可以对不同业务进行网络隔离。您需要创建或选择所需的虚拟私有云。
全量同步失败报错,关键词“has date/datetime: *** which is outside of dest allowed range” 场景描述 Oracle->MySQL全量同步期间DRS任务报错,同步日志界面提示:service DATAMOVE failed,
全量或增量阶段失败报错,关键词“Reached end of input stream” 场景描述 全量或增量阶段,DRS迁移或同步任务报错,日志提示信息:service LOGMANAGER failed, cause by: Reached end of input stream
增量阶段失败报错,关键词“Can't find file: *** (errno: 2 - No such file or directory)” 场景描述 增量迁移或同步期间DRS任务报错,日志提示信息:service INCREMENT failed, cause by: Can't
增量阶段失败报错,关键词“Table *** already exists” 场景描述 增量迁移或同步期间DRS任务报错,日志提示信息:service INCREMENT failed, cause by: Table '%s' already exists 可能原因 在目标库已经创表
增量同步失败报错,关键词“Source supplemental log level is PK/UI. Missing column data at delete+insert on ***” 场景描述 Oracle->PostgreSQL、GaussDB(DWS)、GaussDB
增量阶段失败报错,关键词“not illegal for mariaDb gtid position” 场景描述 增量迁移或同步期间DRS任务报错,日志提示信息:service INCREMENT failed, cause by: %s not illegal for mariaDb
增量阶段失败报错,关键词“Data truncation: Data too long for column” 场景描述 增量迁移或同步期间DRS任务报错,日志提示信息:service INCREMENT failed, cause by: Data truncation: Data
增量阶段失败报错,关键词“Table *** doesn't exist” 场景描述 增量迁移或同步期间DRS任务报错,日志提示信息:service INCREMENT failed, cause by: Table '%s' doesn't exist; sql is: create