检测到您已登录华为云国际站账号,为了您更好的体验,建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
概述 场景描述 本实践使用DRS的实时同步功能将本地Oracle数据库实时同步至华为云DDM。通过全量+增量同步,实现源数据库Oracle和目标数据库DDM的数据长期同步。 前提条件 拥有华为云实名认证账号。 账户余额大于等于0元。 服务列表 虚拟私有云 VPC 分布式数据库中间件DDM
素(例如网络波动)导致的任务失败,DRS通过记录当前解析和回放的位点(该位点同时也是数据库内部一致性的依据),下次从该位点开始回放的方式来实现断点续传,以确保数据的完整性。 增量阶段的迁移、同步,DRS会自动进行多次断点续传的重试,全量阶段的MySQL迁移,系统默认进行三次自动续传,无需人工干预。
移任务,实现在数据库迁移过程中业务中断时间最小化。 应用场景 企业业务高速发展,传统数据库扩容性差,迫切需要分布式化改造。 传统数据库需要自购并安装服务器、系统、数据库等软件,运维成本高、难度大。 传统数据库性能瓶颈问题,复杂查询性能较差。 如何不中断业务并且平滑地实现数据迁移。
量底层实现原理可参考产品架构和功能原理。 “全量+增量”: 该模式为数据持续性实时同步,通过全量过程完成目标端数据库的初始化后,增量同步阶段通过解析日志等技术,将源端和目标端数据保持数据持续一致。 说明: 选择“全量+增量”同步模式,增量同步可以在全量同步完成的基础上实现数据的持
过程,再通过多项指标和数据的对比分析,帮助确定合适的业务割接时机,实现最小化业务中断的数据库迁移。 通过增量迁移技术,能够最大限度允许迁移过程中业务继续对外提供使用,有效的将业务系统中断时间和业务影响最小化,实现数据库平滑迁移上云,支持全部数据库对象的迁移。 图1 实时迁移 支持的数据库类型
志等技术,将源端和目标端数据库保持数据持续一致。 说明: 选择“全量+增量”迁移模式,增量迁移可以在全量迁移完成的基础上实现数据的持续同步,无需中断业务,实现迁移过程中源业务和数据库继续对外提供访问。 指定公网IP 网络类型选择“公网网络”时可见,选择为DRS实例绑定的弹性公网I
一次性数据库迁移,则需要停止业务,上传全量备份进行恢复。 如果需要数据库迁移中业务不中断,则需要使用全量备份和多次增量日志备份的恢复来实现业务中断最小化。 最后一次备份 一次典型的增量备份恢复过程,一般会涉及多个增量备份文件,且需要执行多次增量备份恢复操作。每次增量备份恢复均
在云服务不触碰源数据库的情况下,实现数据迁移。 常用场景:云下数据库迁移上云。 特点:云服务无需碰触源数据库,实现数据迁移。 图2 备份迁移 实时同步 实时同步是指在不同的系统之间,将数据通过同步技术从一个数据源拷贝到其他数据库,并保持一致,实现关键业务的数据实时流动。 实时同步
在云服务不触碰源数据库的情况下,实现数据迁移。 常用场景:云下数据库迁移上云。 特点:云服务无需碰触源数据库,实现数据迁移。 图2 备份迁移 实时同步 实时同步是指在不同的系统之间,将数据通过同步技术从一个数据源拷贝到其他数据库,并保持一致,实现关键业务的数据实时流动。 实时同步
服务介绍 数据复制服务 DRS 数据复制服务介绍 02:53 数据复制服务介绍 操作指导 数据复制服务 DRS 如何实现迁移中业务中断最小化 06:45 如何实现迁移中业务中断最小化 数据复制服务 DRS 创建实时同步任务 06:34 创建实时同步任务 数据复制服务 DRS 创建备份迁移任务
数据复制服务有哪些安全保障措施 如何处理迁移过程中出现的网络中断 迁移过程中会使用哪些数据库账户 如何通过设置VPC安全组,实现DRS任务网络互通 如何处理迁移实例和数据库网络连接异常 不同VPC场景下,如何实现源库和目标库的网络互通 DRS公网网络的EIP带宽是多少 DRS支持跨账号云数据库迁移吗
打开严格模式,则将<value>设置为1。 如果为RDS for MySQL实例,可通过修改数据库innodb_strict_mode参数实现,详情请参考修改实例参数章节。 更多其他类型数据库修改innodb_strict_mode的方法,可参考对应数据库的使用说明。 父主题: 数据库参数检查
不要同时在RDS实例页面进行读写设置。 灾备任务结束后,灾备数据库也将变为读写状态。 外部数据库具有superuser权限的账号时,也可以实现作为灾备数据库时只读状态。 如遇DRS实例节点故障重建,任务恢复前为保证DRS任务在恢复过程中的数据一致性,会将本云为备数据库短暂设置为只读,任务正常后同步关系恢复正常。
则源库用户体系下其他用户账号在完成用户迁移后,如果用户迁移和权限授权都执行成功,则无需授权便可继续使用原业务(使用DRS用户迁移功能可以实现用户、权限、密码迁移),否则如果想在原来的用户权限体系下沿用原业务,则需要进行授权后才具有Definer相关数据库对象的访问使用权限,从而保证原业务正常。
通过对等连接实现网络互通。 目前DRS暂不支持跨租户通过VPC网络实现源库、目标库的网络互通。如果有需要,用户可通过手动创建对等连接后,选择“VPN网络”实现网络互通。 具体建立VPC对等连接的方法,可参考《虚拟私有云用户指南》。 VPN网络 适合通过VPN网络,实现其他云下自建
GaussDB分布式版为源强制结束任务 GaussDB集中式版为源强制结束任务 PostgreSQL为源强制结束任务 通过创建事件触发器和函数实现PostgreSQL增量DDL同步
数据到客户端业务程序,客户端根据业务需求实现具体消费逻辑。 当客户端程序消费的变更数据会实时记录在服务器端,异常中断、重连等场景下,DRS服务端会从最后的消费位点继续推送增量变更数据。 实时灾备基本原理 实时灾备的功能是通过实时复制技术实现两个数据库的数据容灾,底层技术原理和实时
迁移实例是帮助实现数据迁移的辅助型资源,存在于迁移任务的整个生命周期。数据复制服务可以通过迁移实例连接源数据库,读取源数据,然后将数据复制到目标数据库中。 迁移日志 迁移日志是指数据库迁移过程中,数据复制服务为您提供的包含警告、错误和提示等类型的信息。 同步实例 同步实例是帮助实现实时同
能损耗。对同步性能敏感的场景下,需要平衡性能和安全的取舍。 通过网络访问控制,实现数据同步网络隔离 通过防火墙、ACL规则、安全组等进行网络访问控制,可以有效地控制DRS访问数据库的网络范围,也可以实现数据同步网络和其他网络的隔离,确保DRS链路的安全性。 配置独立的数据库迁移用户,赋予迁移最小权限
如果为自建的MySQL数据库,可通过命令行方式修改。 SET sql_mode = '修改后的值'; 如果为RDS for MySQL实例,可通过修改数据库sql_mode参数实现,详情请参考修改实例参数章节。 父主题: 数据库参数检查