检测到您已登录华为云国际站账号,为了您更好的体验,建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
行数对比:使用select count方式,查询速度跟数据库性能相关。 内容对比:在数据库没有压力并且网络正常的情况下,对比速度大概是5M/s。 用户对比:与对象对比同时返回结果,如果对象不多的情况下,基本会在几分钟就会返回结果。 父主题: 数据对比
同步Topic策略,可选择“集中投递到一个Topic”。 Topic 选择目标端需要同步到的Topic。 同步到kafka partition策略 同步到kafka partition策略。 全部投递到Partition 0:适用于有事务要求的场景,事务保序,可以保证完全按照事务顺序消费,写入性能比较差,如果没有强事务要求,不推荐使用此选项。
如果您未注册华为账号并开通华为云,请在华为云官网注册,详细操作请参见注册华为账号并开通华为云。注册成功后,可访问华为云的所有服务,包括数据复制服务、关系型数据库、文档数据库服务等。 如果您已注册华为账号并开通华为云,可直接登录管理控制台,访问数据复制服务。
源数据表是否含有不可作为分布键的列类型 PostgreSQL->GaussDB(DWS)同步 表1 源数据表是否含有不可作为分布键的列类型 预检查项 源数据表是否含有不可作为分布键的列类型 描述 源数据表的列类型中含有不可作为分布键的列类型,会造成数据同步失败。 不通过提示及处理建议
需要配置对应实例的读权限,例如数据库为RDS时,需要在项目上配置RDS ReadOnlyAccess权限。 更新数据加工信息 drs:dataTransformation:update 需要配置对应实例的读权限,例如数据库为RDS时,需要在项目上配置RDS ReadOnlyAccess权限。
源库是否包含无日志表(UNLOGGED TABLE) PostgreSQL为源同步场景 表1 源库是否包含无日志表(UNLOGGED TABLE) 预检查项 源库包含无日志表(UNLOGGED TABLE)。 描述 检查源库包含无日志表(UNLOGGED TABLE),若存在无日志表,则导致同步失败。
志。 不通过原因 同步对象需要全列数据,但是没有打开全列补全日志。 处理建议 打开全列补全日志。 参考如下命令: 库级:alter database add supplemental log data (all) columns 表级:alter table SCHEMA名.表名
用户在设置迁移用户密码时,设置的密码不符合目标库的密码复杂度要求,需要按照用户密码复杂度的要求进行密码设置。 操作步骤 以下操作适用于目标数据库为RDS实例的情况。 登录关系型数据库服务控制台。 选择指定目标数据库实例。 单击实例名称。 页面跳转至“基本信息”页签,切换至“参数修改”页面。
冲突检查 目标数据库是否存在和源数据库同名的数据库 目标数据库是否存在和源数据库同名数据库下的同名视图 目标数据库是否存在与源数据库同名的数据库下的同名非空集合 目标数据库是否存在与源数据库同名的表 目标数据库是否存在与源数据库同名的对象 源库和目标库数据库固定集合一致性检查 父主题:
Replication Service,简称DRS)支持将本地MongoDB数据库的数据迁移至本云文档数据库服务(Document Database Service,以下简称DDS)实例。通过DRS提供的实时迁移任务,实现在数据库迁移过程中业务和数据库不停机,业务中断时间最小化。
alter database add supplemental log data (all) columns; 查看库补充日志为ALL级别是否打开: select supplemental_log_data_all as allLog from v$database; 父主题: 数据库配置项检查
contents:内容对比 random:抽样对比,当前仅支持GaussDB分布式到GaussDB分布、GaussDB分布式到PostgreSQL、GaussDB主备到PostgreSQL同步链路。 options Map<String,String> 对比配置项,key-value形式。 内容对比支持以下配置项:
备份迁移失败,提示使用的是日志备份文件 操作场景 客户通过全量备份数据迁移上云时,报错:Target database has been restored,can not restore for transaction log。 问题分析 创建任务选择的备份文件是日志备份文件,不
网络情况 源数据库连接是否成功 目标数据库是否连接成功 父主题: 预检查不通过项修复方法
源库实例状态检查 源数据库实例状态是否正常 源数据库的实例类型检查 源库实例ChangeStream接口是否可用 父主题: 预检查不通过项修复方法
时间设置在业务低峰期,相对静止的数据可以有效提升一次性迁移成功率,避免迁移对业务造成性能影响。 在网络无瓶颈的情况下,全量迁移会对源数据库增加约20MB/s的查询压力,以及占用2~4个CPU。 DRS并发读取数据库,会占用大约6-10个session连接数,需要考虑该连接数对业务的影响。
公共接口管理 批量创建任务 批量测试连接 批量测试连接-集群模式 批量修改任务 批量数据库对象选择 批量预检查 批量查询预检查结果 批量设置任务限速 批量获取数据库参数 修改数据库参数 批量启动任务 批量续传/重试 批量暂停任务 批量结束任务或删除任务 批量修改源库/目标库密码 批量设置definer
/v3/{project_id}/jobs/batch-creation drs:migrationJobs:create(创建实例需要在项目上配置 RDS ReadOnlyAccess、VPC FullAccess、SMN FullAccess权限。) √ √ 批量结束和删除任务 DELETE
任务启动失败报错,关键词“Initialize logical replication stream failed, the source database may have a long transaction: ****.” 增量同步失败报错,关键词“The replication slot
备份迁移失败,提示增量bak文件LSN不连续 操作场景 客户通过增量备份数据迁移上云时,报错:In incremental restoration mode, the incremental .bak file is not continuous with the previous