检测到您已登录华为云国际站账号,为了您更好的体验,建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
类并发技术:读写类并发和线程类并发。 读写类并发 为了提升全量阶段历史数据的搬迁,同时对抗网络的不稳定性,DRS实现了数据行级并发抽取效果,从而使得历史数据搬迁速度最大化,同时如果出现网络丢包时,不会大面积重来。 为加快数据写入,DRS实现了表级并发写入,从而大幅提升了数据传输速度,使得同步时延在同城达到毫秒级。
实时同步链路规格说明 注意事项 文中提供的性能指标仅用于提供参考的测试数据,实际环境会受源或目标数据库性能、网络带宽、数据模型、业务模型等因素影响。 规格说明 表1 全量同步性能上限 链路名称 全量性能上限(MB/s)参考 MySQL为源链路 50 Oracle为源链路 40 Redis为源链路
本示例中,DRS源数据库为其他云MySQL,目标端为华为云云数据库GaussDB(for MySQL),通过公网网络,将源数据库迁移到目标端,部署架构可参考图1。 图1 部署架构图 服务列表 虚拟私有云 VPC 云数据库 GaussDB(for MySQL) 数据复制服务 DRS 使用说明 本
华为云租户的安全责任在于对使用的 IaaS、PaaS 和 SaaS 类云服务内部的安全以及对租户定制配置进行安全有效的管理,包括但不限于虚拟网络、虚拟主机和访客虚拟机的操作系统,虚拟防火墙、API 网关和高级安全服务,各项云服务,租户数据,以及身份账号和密钥管理等方面的安全配置。 《华为云安全白皮书
当DRS任务与源库或目标库进行测试连接失败时,DRS提供一键诊断功能,可对源库或者目标库当前网络连接情况进行诊断并返回结果。 仅支持通过输入IP地址或者界面选择方式,获取数据库信息的任务节点进行网络诊断,暂不支持GaussDB的DN诊断。 集群或多AZ任务场景,只支持在主任务的节点进行诊断。
当DRS任务与源库或目标库进行测试连接失败时,DRS提供一键诊断功能,可对源库或者目标库当前网络连接情况进行诊断并返回结果。 仅支持通过输入IP地址或者界面选择方式,获取数据库信息的任务节点进行网络诊断,暂不支持GaussDB的DN诊断。 集群或多AZ任务场景,只支持在主任务的节点进行诊断。
当DRS任务与源库或目标库进行测试连接失败时,DRS提供一键诊断功能,可对源库或者目标库当前网络连接情况进行诊断并返回结果。 仅支持通过输入IP地址或者界面选择方式,获取数据库信息的任务节点进行网络诊断,暂不支持GaussDB的DN诊断。 集群或多AZ任务场景,只支持在主任务的节点进行诊断。
实时灾备链路规格说明 注意事项 文中提供的性能指标仅用于提供参考的测试数据,实际环境会受源或目标数据库性能、网络带宽、数据模型、业务模型等因素影响。 规格说明 实时灾备根据链路的性能上限,定义了四种规格:极小、小、中、大,各个规格的同步性能上限如表1。 表1 规格性能上限 规格名称
器上安装社区版MongoDB。 目标数据库引擎 DDS 本示例中目标数据库为华为云DDS实例。 网络类型 公用网络 本示例中采用公用网络。 网络示意图 图1 VPN网络 图2 公网网络+SSL安全连接 迁移流程 图3 迁移流程图 迁移建议(重要) 数据库迁移与环境多样性和人为操作
迁移到本云数据库实例和业务切割后,才能修改。 通过Microsoft SQL Server Management Studio 数据库管理软件登录到本地数据库中心。 选择需要迁移的数据库,单击鼠标右键,选择“属性”,在属性弹出框左边列表选择“选项”。 在“恢复模式”下拉菜单中选择“完整”,单击“确定”。
DATAMOVE failed, cause by: read table=`%s`.`%s` failed。 可能原因 源库性能不足或网络不稳定导致从源库读取表数据失败。 解决方案 联系华为工程师调整访问源库超时时间。 调整完成后,在任务列表中,单击任务对应操作列的“续传”,重新提交任务。
全量(初始化)阶段,DRS需要从源库将所有存量数据查询一次。DRS查询使用简单SQL语句,对源库影响主要体现在IO上,查询速度也受限于源数据库IO相关的性能以及网络带宽。一般在网络无瓶颈的情况下,会对源数据库增加约50MB/s的查询压力,以及占用2~4个CPU,在并发读取源数据库时,会占用大约6-10个session连接数,其中:
VPC 源数据库实例所在的虚拟专用网络,可以对不同业务进行网络隔离。您需要创建或选择所需的虚拟私有云。如何创建虚拟私有云,请参见《虚拟私有云用户指南》中的“创建虚拟私有云基本信息及默认子网”。 子网 通过子网提供与其他网络隔离的、可以独享的网络资源,以提高网络安全。子网在可用分区内才
当您完成了账号、权限、数据库、网络等基本准备工作后,可以根据自身的业务需求使用DRS提供的一系列常用实践。 表1 DRS常用实践 场景 案例 描述 创建任务 实时迁移 其他云MySQL迁移到云数据库 RDS for MySQL 本实践介绍通过公网网络,使用DRS将其他云的MySQL数据迁移到华为云RDS
当您完成了账号、权限、数据库、网络等基本准备工作后,可以根据自身的业务需求使用DRS提供的一系列常用实践。 表1 DRS常用实践 场景 案例 描述 创建任务 实时迁移 其他云MySQL迁移到云数据库 RDS for MySQL 本实践介绍通过公网网络,使用DRS将其他云的MySQL数据迁移到华为云RDS
数据库引擎 选择“Oralce”。 网络类型 默认为“公网网络/VPN、专线网络”类型,目前支持“公网网络/VPN、专线网络”、“VPC网络”,此处以“公网网络/VPN、专线网络”为示例。 需要注意,此处选择的网络类型需要与后续创建任务的网络类型一致。如果网络类型不一致,则无法在测试连接步骤选中。
目标数据库引擎 选择“PostgreSQL”。 网络类型 此处以“公网网络”为示例。目前支持可选“公网网络”、“VPC网络”和“VPN、专线网络”。 VPC网络:适合云上同账号同Region同VPC场景下数据库之间的同步。 公网网络:适合通过公网网络把其他云下或其他平台的数据库同步到目标数
when split table shard occur! Table is %s .Error code is %s. 可能原因 源库性能不足或网络不稳定导致源库数据分片超时。 解决方案 查看任务状态是否正常。 任务状态正常,该报错为日志中显示,无需处理。 任务状态异常,执行2。 在管理控制台右上角,选择“工单
DATAMOVE failed, cause by: shard table=`%s`.`%s` failed 可能原因 源库性能不足或网络不稳定导致源库数据分片超时。 解决方案 查看任务状态是否正常。 任务状态正常,该报错为日志中显示,无需处理。 任务状态异常,执行2。 在管理控制台右上角,选择“工单
DRS导出任务列表 DRS支持查询和导出详细的任务信息列表,包括任务名称、ID、状态、网络类型、源库和目标库IP地址或域名、端口、告警配置等信息,方便客户从不同维度查看和管理任务。在任务管理界面,选择查询条件,单击右侧的,导出当前的查询结果。 图1 导出任务查询结果 父主题: 通用操作