检测到您已登录华为云国际站账号,为了您更好的体验,建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
GaussDB(DWS) 说明: 目前仅支持白名单用户使用。 全量+增量数据同步 将PostgreSQL同步到GaussDB(DWS) GaussDB主备版 增量数据同步 全量数据同步 全量+增量数据同步 说明: 目前单增量数据同步仅支持白名单用户使用。 将PostgreSQL同步到GaussDB主备版
RT、UPDATE等,如果要授予该账号所有权限,则使用ALL · databasename:数据库名。如果要授予该账号具备所有数据库的操作权限,则使用*。 · tablename:表名。如果要授予该账号具备所有表的操作权限,则使用*。 · username:待授权的账号。 · h
周期性对比:定时对源数据库与目标数据库表的行数或对象进行对比并展示结果,需要用户开启并设置对比策略。 在使用对比功能查看数据一致性时,建议优先使用行数对比,确定行数是否一致。如果出现行数不一致的情况,可以针对不一致的表,使用内容对比,来确定具体有哪些数据不一致。 表1 支持的对比方式 迁移方向 数据流向
GaussDB分布式版为源任务暂不支持同步序列值,如果同步的表中存在关联的序列,需要在任务结束后,参考以下内容手动同步序列值。 操作步骤 使用DRS同步任务测试连接时的用户登录GaussDB分布式版实例。 执行如下语句,查询库中具有管理序列的表及其关联的序列。 set search_path
如果为自建的MySQL数据库,可通过命令行方式修改。 通过以下命令查看数据库的字符集。 SHOW VARIABLES LIKE "group_concat_max_len"; 使用命令修改参数。 SET SESSION group_concat_max_len = <新的最大长度>; 如果为RDS for MySQL
所选择的流量文件的SQL已经全部回放到了目标数据库。 结束任务 释放该回放实例和资源。 结束任务失败 释放回放任务所使用的实例和资源失败。 已结束 回放任务所使用的实例释放成功。 对于创建失败的任务,DRS默认保留3天,超过3天将会自动结束任务。 对于未启动、状态为配置中的任务,
获取新增和删除的对象结果(任务再编辑时使用)。 枚举值: detail synchronized change 请求参数 表3 请求Header参数 参数 是否必选 参数类型 描述 Content-Type 是 String 发送的实体的MIME类型。推荐用户默认使用application/j
MySQL)、MySQL->Kafka、MySQL->CSS/ES、MySQL->Oracle的实时同步任务使用。 任务状态为配置中、全量中、增量中、全量失败、增量失败、暂停中的实时同步任务使用。 URI PUT /v5/{project_id}/jobs/{job_id}/modify-configuration
数据库的增量数据同步到目标端,部署架构可参考图1。 图1 同VPC场景 使用说明 本实践的资源规划仅作为演示,实际业务场景资源以用户实际需求为准。 本实践端到端的数据为测试数据,仅供参考;更多关于DRS使用相关内容请单击这里了解。 父主题: RDS for MySQL同步到Kafka
若您购买的任务已到期,请参见费用中心用户指南中资源停止服务或逾期释放说明章节进行处理。 欠费 当余额不足时,如果没有及时的进行续费或充值,就会导致任务欠费限制使用,待续费或充值后,可继续正常使用。任务欠费后,将进入宽限期。如宽限期满仍未续费或充值,将进入保留期。在保留期内资源将停止服务。保留期满仍未续费或充值,存储
到这里为止这个请求需要的内容就具备齐全了,您可以使用curl、Postman或直接编写代码等方式发送请求调用API。对于获取用户Token的接口,返回的响应消息头中“x-subject-token”就是需要获取的用户Token。有了Token之后,您就可以使用Token认证调用其他API。 父主题:
耗掉内存导致不能给wiredTiger引擎保证的内存,则会出现内存溢出的情况。 一般默认情况下,mongod的wiredTiger引擎可以使用整个机器内存减一的50%(3.2的版本)或者60%(3.4以后的版本)。 解决方案 如果mongod服务是单独部署在一台机器上,则在迁移过
连接源和目标数据库的账号密码修改后,请参考修改连接信息章节修改DRS任务的连接信息,避免任务连接失败后自动重试,导致数据库账号被锁定影响使用。 表2 使用须知 类型名称 使用和操作限制 数据库权限设置 源数据库账号需要具备如下权限: SELECT、SHOW VIEW、EVENT、LOCK TABLES、REPLICATION
同步时延为0,并稳定保持一段时间;同时,您可以使用数据级对比功能,进行割接前的最后一次数据级对比,耗时可参考之前的对比记录。 如果时间允许,则选择全部对比。 如果时间不允许,则推荐对比活跃表,关键业务表,第二步对比多次存在差异的表等。 确定系统割接时机,业务系统指向目标数据库,业务对外恢复使用。 结束迁移任务
如果为自建的数据库,可通过命令行方式修改: 通过以下命令查看数据库的时区。 SHOW VARIABLES LIKE "%time_zone%"; 使用命令修改时区。 SET time_zone = '时区'; 如果为RDS for MySQL实例,可参考“如何修改时区”章节进行修改。 O
理类型检查规则不一致,常见于5.6版本迁移至5.7、8.0 版本。源数据库地理类型数据在目标库版本中为非法格式,导致使用DRS在目标库插入数据时报错。 例如,使用POLYGON表示多边形时,5.7及以上版本会校验坐标点个数,至少需要3个点构成有效多边形。而在5.6版本中不做校验,单个坐标点表示的多边形也能正常插入。
将目标库中与自增或自减列相关联的序列值进行重置。如果源数据可以连接,请忽略此节,参考上节操作即可。 使用对应DRS任务的目标数据库测试链接用户,登录该同步任务的目标数据库。 使用如下语句,查询出将nextval作为表列默认值的序列对应的序列值重置sql语句。 set search_path
分布式版,实时同步场景使用。 redis-to-gaussredis:Redis迁移到GeminiDB Redis,实时迁移场景使用。 rediscluster-to-gaussredis:Redis集群迁移到GeminiDB Redis,实时迁移场景使用。 枚举值: oracle-to-gaussdbv5
确定回放任务不再使用后,结束DRS任务。 准备工作 在进行录制回放前,需要参考如下内容,提前进行华为账号、源和目标数据库、数据库连接账号、SQL流量文件、网络等准备工作。 注册华为账号 数据库准备 SQL流量文件准备 连接账号准备 网络准备 准备华为账号,创建用户并赋权使用DRS。 打开华为云网站。
可参考如下图示: 图2 GaussDB分布式版到Kafka同VPC场景 使用说明 本实践的资源规划仅作为演示,实际业务场景资源以用户实际需求为准。 本实践端到端的数据为测试数据,仅供参考;更多关于DRS使用相关内容请单击这里了解。 资源规划 表1 资源规划 类别 子类 规划 备注