检测到您已登录华为云国际站账号,为了您更好的体验,建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
准备华为账号,创建用户并赋权使用DRS。 参考注册华为账号并开通华为云。 参考权限管理创建用户并授权使用DRS。 数据库准备 源和目标数据库以及对应连接账号权限准备。 说明: 建议创建单独用于DRS任务连接的数据库账号,避免因为账号修改,导致的任务连接失败。 连接源和目标数据库的账
背景 扩大云连接带宽时需要重建带宽链路,则会导致网络断开,此时是否会对DRS任务产生影响取决于网络断开的时间以及源库IP有没有发生变化。例如针对MySQL引擎而言,如果网络断开1天,而在这1天时间内源库binlog被清理了(MySQL都有binlog清理策略,用户侧自己配置的),就无法进行任务续传,需要重置任务。
提供配额查询接口。 DRS接口 v3 公共接口管理 包括创建任务、测试连接、预检查、查询任务详情、查询任务进度、创建对比任务、删除、重试、结束任务等公共接口。 DRS接口 v3 实时迁移管理 包括更新迁移用户信息、获取源库迁移用户列表接口。 DRS接口 v3 实时同步管理 包括数据加工、设置同步策略接口。
操作流程 创建RDS for MySQL实例,并且将RDS for MySQL数据同步到DDM的主要任务流程如图1所示。 图1 流程图 父主题: RDS for MySQL迁移到DDM
操作流程 创建DDM实例,并且将Oracle数据同步到DDM的主要任务流程如图1所示。 图1 流程图 父主题: 本地Oracle同步到DDM
下,DRS实例可以从最近停止的点开始,继续进行数据复制。 实例高可用 可用区指在同一区域下,电力、网络隔离的物理区域,可用区之间内网互通,不同可用区之间物理隔离。DRS也提供了跨AZ高可用的能力,对于跨AZ高可用的实例,当主AZ的实例出现故障时,可以倒换至备AZ的实例,继续提供数据复制服务。
DRS用户权限迁移 父主题: 图解数据复制服务
致。 授权操作说明 创建用户 操作方式: CREATE USER 'username'@'host' IDENTIFIED BY 'password'; · username:待创建的账号。 · host:允许该账号登录的主机,如果允许该账号从任意主机登录数据库,可以使用%。 ·
操作流程 创建RDS for MySQL实例,并且将RDS for MySQL增量同步到Kafka的主要任务流程如图1所示。 图1 流程图 父主题: RDS for MySQL同步到Kafka
Boolean 目标实例是否限制为只读。 replace_definer 否 Boolean 所有Definer是否迁移到该用户下,MySQL数据库支持该设置,测试连接之后修改调用时必填。取值: true:迁移后,所有源数据库对象的Definer都会迁移至该用户下,其他用户需要授权后才具有数据库对象权限
源数据库权限 全量迁移需要具备如下最小权限: 副本集:连接源数据库的用户需要有admin库的readAnyDatabase权限。 单节点:连接源数据库的用户需要有admin库的readAnyDatabase权限。 集群:连接源数据库的用户需要有admin库的readAnyDatabas
置等。 网络质量和网络延迟 网络延迟越小(影响因素包括但不限于源库目标库和DRS实例地理位置的远近程度),迁移速度越快,耗时越少。网络质量差(比如丢包率高)会降低迁移速度。 DRS实例规格 DRS实例规格越大,迁移速度越快,耗时越少。 源数据的模型和分布 此类因素包括是否有主键、
connection may be interrupted 可能原因 DRS连接源库获取binlog的连接中断,可能是源库的状态发生了改变,或网络出现异常。 解决方案 检查源库运行状态是否正常。 检查DRS实例和源库之间的网络是否能够连通。 确认没有问题后,在任务列表中,单击任务对应操作列的“续传”,重新提交任务。
方法一: 选择一个非业务的时间段,中断当前数据库上的所有业务连接。 通过如下命令查询当前数据库上的所有业务连接(所有的binlog Dump连接及当前连接除外)。 show processlist; 中断上面查出的所有业务连接。 在上述操作未结束之前,请不要创建或者启动迁移任务,否则会导致数据不一致。
实时灾备是否支持指定库进行灾备 问题 实时灾备是按照实例维度进行灾备,不支持选择指定库。 解决方案 实时迁移和实时同步支持选择指定的表或者库。 。 父主题: 实时灾备
源库用户属于Oracle Oracle为源增量同步时,DRS会对源数据库账号进行检查。 不通过原因 源库账号属于Oracle,而非用户本身,无法进行增量同步。 处理建议 使用用户本身的账号,不要使用Oracle自有的账号。 父主题: 数据库参数检查
用索引的情况。 2. 可在实例级设置参数collation_server = utf8mb4_bin,该设定可以确保全实例默认字符集(有别于建议1,建议1是仅迁移的库,这里是全局)一致,均为utf8mb4_bin,需要用户根据业务情况决策是否应用于全实例。 父主题: 实时迁移
本实践通过创建DRS同步任务,实现将源数据库RDS for MySQL的增量数据同步到目标端Kafka,主要包含以下部分内容: 介绍如何在华为云创建RDS for MySQL实例。 介绍如何在华为云创建分布式消息服务Kafka。 介绍如何创建DRS同步任务。 前提条件 拥有华为云实名认证账号。 账户余额大于等于0元。
根据界面提示填写网关名称和信息。 VPN网关接入的虚拟私有云(VPC)和目标端DDM实例的VPC保持一致,即创建目标端VPC和安全组中创建的VPC。 根据界面提示填写VPN连接信息。 本端子网和目标端DDM实例所在VPC的子网保持一致,即创建目标端VPC和安全组中创建的子网 远端网关和远端子网为源端VP
根据界面提示填写网关名称和信息。 VPN网关接入的虚拟私有云(VPC)和源端RDS for MySQL实例的VPC保持一致,即创建源端VPC和安全组中创建的VPC。 根据界面提示填写VPN连接信息后,单击“提交”。 本段子网和源端RDS for MySQL实例所在VPC的子网保持一致,即创建源端VPC和安全组中创建的子网。