检测到您已登录华为云国际站账号,为了您更好的体验,建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
DRS数据对比 父主题: 图解数据复制服务
DRS会过滤全部增量账号以及权限。 迁移用户 数据库的迁移过程中,迁移用户需要进行单独处理。 常见的迁移用户一般分为三类:可完整迁移的用户、需要降权的用户和不可迁移的用户。您可以根据业务需求选择迁移或者不迁移,选择“是”后,可根据需要选择迁移用户。 是 当您选择迁移用户时,请参见迁移用户章节进行数据库用户、权限及密码的处理。
用于保证逻辑复制槽位点正常推进。 数据库账号权限要求 在使用DRS进行同步时,连接源库和目标库的数据库账号需要满足以下权限要求,才能启动实时同步任务。不同类型的同步任务,需要的账号权限也不同,详细可参考表3进行赋权。DRS会在“预检查”阶段对数据库账号权限进行自动检查,并给出处理建议。
用户有多个下游需要订阅同一个RDS实例时,需要创建多个订阅通道。这些订阅任务订阅的RDS实例均为同一个实例ID。 一个下游SDK不可以订阅消费多个订阅任务。 目前支持VPC网络,但是不支持VPC内的容器网络。 由于源库异常、网络中断等造成的DRS订阅任务异常,需要在数据订阅界面续传订阅任务,详细参考续传订阅任务。
处理建议:根据实际情况判断是否需要删除目标数据库中与源数据库同名的库、或指定一个新的实例进行迁移。 Oracle->MySQL、Oracle->TaurusDB同步场景 表3 目标数据库是否存在和源数据库同名的数据库 预检查项 目标数据库是否存在和源数据库同名的数据库。 描述 校验用户需要同步的表的
移。 处理建议:请手动在目标数据库创建好与源数据库同名的数据库、schema。 不通过原因:目标数据库已经存在需要同步的对象。 处理建议:请手动在目标库删除已经存在且需要同步的表,或者只选择同步目标库不存在的表。 MySQL->GaussDB同步场景 表2 目标库是否存在已配置数据库
数据类型映射关系 由于异构数据库之间的数据类型不是一一对应的,所以数据复制服务在进行迁移或同步时,会根据两种不同的数据库类型进行对应的数据类型映射。 本章节根据不同的数据库引擎,提供对应的数据库映射关系列表,方便您在进行数据库迁移或同步的时候参考。 MySQL->PostgreSQL
在“数据加工”页面,选择需要加工的数据,进行列加工。 如果不需要数据加工,单击“下一步”。 如果需要进行列加工,可参考数据加工章节,设置相关规则。 图9 数据加工 在“预检查”页面,进行同步任务预校验,校验是否可进行实时同步。 查看检查结果,如有不通过的检查项,需要修复不通过项后,单击“重新校验”按钮重新进行任务预校验。
和目标数据库GaussDB的数据迁移,最终业务割接至GaussDB。 解决问题 企业业务高速发展,传统数据库扩容性差,迫切需要分布式化改造。 传统数据库需要自购并安装服务器、系统、数据库等软件,运维成本高、难度大。 传统数据库性能瓶颈问题,复杂查询性能较差。 如何不中断业务并且平滑地实现数据同步。
当对象名称包含空格时,名称前后的空格不显示,中间如有多个空格只显示一个空格。 选择的同步对象名称中不能包含空格。 在“数据加工”页面,根据需要选择数据加工的方式。 如果不需要数据加工,单击“下一步”。 如果需要数据加工,可选择“数据过滤”、“附加列”或“列加工”,参考数据加工章节,设置相关规则。 图10 数据加工
填写同步任务参数: 配置同步任务名称。 选择需要同步任务的源库、目标数据库以及网络信息。 这里的源库选择源端RDS for MySQL准备创建的RDS实例。 图1 同步实例信息 企业项目选择“default”。 单击“开始创建”。 同步实例创建中,大约需要5-10分钟。 配置源库信息和目标库数据库密码。
灾备数据库的账号需要满足以下权限要求,才能启动实时灾备任务。不同类型的灾备任务,需要的账号权限也不同,详细可参考表2进行赋权。DRS会在“预检查”阶段对数据库账号权限进行自动检查,并给出处理建议。 表2 数据库账号权限 类型名称 所需权限 业务数据库连接账号 需要具备如下权限:
当对象名称包含空格时,名称前后的空格不显示,中间如有多个空格只显示一个空格。 选择的同步对象名称中不能包含空格。 在“数据加工”页面,根据需要选择数据加工的方式。 如果不需要数据加工,单击“下一步”。 如果需要数据加工,可选择“数据过滤”、“附加列”或“列加工”,参考数据加工章节,设置相关规则。 图12 数据加工
方案概览 实时迁移方案概览 备份迁移方案概览 实时同步方案概览 数据订阅方案概览 实时灾备方案概览 录制回放方案概览 更多 05 使用 根据需要您可以选择不同的链路,并使用更多的功能管理任务。 实时迁移常用链路 MySQL迁移到MySQL MySQL迁移到GaussDB(for MySQL)
drsUser;)。 目标数据库连接账号 目标数据库不存在DATABASE时需要有建库的权限;不存在SCHEMA时需要有在database中创建schema的权限;不存在表时需要有在对应schema中创建表的权限。 对于每张表需要有INSERT、SELECT、UPDATE、DELETE权限。
灾备数据库的账号需要满足以下权限要求,才能启动实时灾备任务。不同类型的灾备任务,需要的账号权限也不同,详细可参考表2进行赋权。DRS会在“预检查”阶段对数据库账号权限进行自动检查,并给出处理建议。 表2 数据库账号权限 类型名称 所需权限 业务数据库连接账号 需要具备如下权限:
地自建数据库和ECS自建数据库,RDS for MySQL指华为云云数据库RDS上的MySQL数据库。 目前部分功能仅支持白名单用户使用,需要提交工单申请才能使用。您可以在管理控制台右上角,选择“工单 > 新建工单”,完成工单提交。 仅支持目标库版本等于或高于源库版本。 MySQL为源迁移方案
副本集:连接源数据库的用户需要对待迁移库有read权限。 单节点:连接源数据库的用户需要对待迁移库有read权限。 集群:连接源数据库的用户需要对待迁移库有read权限,对config数据库有read权限。 如果需要迁移源数据库用户和角色信息,连接源数据库的用户需要对admin数据库的系统表system
DRS对比任务耗时预估 对象对比:根据源库查询性能,一般会在几分钟内返回结果,如果对象数据量特别巨大,对比时长可能达到几十分钟。 行数对比:使用select count方式,查询速度跟数据库性能相关。 内容对比:在数据库没有压力并且网络正常的情况下,对比速度大概是5M/s。 用户
统一身份认证服务 统一身份认证服务(Identity and Access Management,简称IAM)为数据复制服务提供了权限管理功能。 需要拥有数据复制服务的Administrator权限后,您才能使用数据复制服务。如需开通该权限,请联系拥有Security Administr