检测到您已登录华为云国际站账号,为了您更好的体验,建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
GaussDB为源链路增量同步连接及端口说明 GaussDB为源的链路在进行增量同步时,需要保证两类连接可用:普通连接和复制连接。其中普通连接进行数据查询,复制连接进行逻辑复制。 为保证DRS能够正常连接进行同步,首先要保证数据库连接的放开,配置方式可参考GaussDB远程连接配置方法,其
别向主2、主1持续同步增量数据。 图2 双主灾备 特点及使用约束 重要! 双主灾备是对环境要求比较高的架构,实施部署双主灾备前请务必阅读约束和设计思考。 双主灾备的搭建过程对步骤是有严格要求的,请按照以下步骤进行部署,以确保双主任务顺利部署。 创建正向灾备任务,具体操作步骤请参见
查询可用链路信息 功能介绍 查询可用链路信息。 调试 您可以在API Explorer中调试该接口,支持自动认证鉴权。API Explorer可以自动生成SDK代码示例,并提供SDK代码示例调试功能。 接口约束 目前仅支持Redis->GeminiDB Redis迁移、Redis集群->GeminiDB
复成读写。 若需要同步业务数据库多租信息时,灾备任务必须以选灾备数据库的方式配置,填写ip地址来配置任务的场景会因无权限写入导致多租信息无法同步。数据库多租特性请参考 操作须知 双主灾备是两条独立的链路,相互之间没有协同作用,由于一些不可控因素,可能会出现使用双边数据不一致的情况
和安全的取舍。 通过网络访问控制,实现数据同步网络隔离 通过防火墙、ACL规则、安全组等进行网络访问控制,可以有效地控制DRS访问数据库的网络范围,也可以实现数据同步网络和其他网络的隔离,确保DRS链路的安全性。 配置独立的数据库迁移用户,赋予迁移最小权限 使用root用户或者其
灾备实例信息 图2 灾备实例信息 表5 灾备实例信息 参数 描述 灾备类型 选择“双主灾备”。 灾备类型可以为“单主灾备”和“双主灾备”。选择双主灾备时,默认创建两个子任务,分别为正向和反向灾备任务。 说明: “双主灾备”目前仅支持白名单用户,需要提交工单申请才能使用。您可以在管理控制台右上角,选择“工单
双AZ任务倒换 DRS实时同步任务在创建时可选择任务类型为“双AZ”或“单AZ”。双AZ任务为一主一备的经典高可用架构,在任务创建后,DRS会同时创建一主一备两个子任务,当主AZ任务发生异常,DRS会自动启动备AZ任务继续进行同步,提高同步任务的可靠性。 DRS目前支持以下链路在创建时进行任务类型的选择:
建成功后,需先配置表示入云的正向任务,待正向任务进入“灾备中”状态时,再配置并启动反向任务。 选择主1,表示创建任务时选择的本云数据库实例具有初始数据,待同步数据,创建成功后,需先配置表示出云的反向任务,待反向任务进入“灾备中”状态时,配置并启动正向任务。 图1 双主灾备实例信息
DRS使用VPN网络访问本地数据中心自建数据库场景,需要在华为云购买VPN服务,并在VPN配置时填写DRS所在VPC和子网相关信息,同时需要在本地数据中心防火墙或主机配置VPN对端设备。操作步流程图2所示: 图2 操作流程 网络配置流程 创建DRS实例,并获取DRS实例所在子网和私有IP地址。 DRS
行账号、网络相关配置使得DRS可以访问本地数据中心数据库。操作流程如图2所示: 图2 操作流程 网络配置流程 创建DRS公网网络任务,为DRS实例绑定弹性公网IP。 在创建公网网络的DRS任务时,可在实例信息页面为DRS实例绑定弹性公网IP。 本地数据中心的防火墙设置。 本地数据
Redis为源链路 30 GaussDB为源链路 40 PostgreSQL为源链路 30 DDM为源链路 20 MongoDB为源链路 20 影响DRS迁移速度的因素很多,当前全量阶段迁移速度为网络和数据库性能无瓶颈、任务为大规格时的测试数据,仅供用户进行参考。 当目标数据库为O
测试连接时输入的端口号无法访问,请检查端口是否存在。如果端口正确,需检查防火墙是否放开。 源数据库为PostgreSQL,数据库配置文件pg_hba.conf缺少对数据库账号的配置,建议配置该账号的远程连接权限。 打开配置文件pg_hba.conf,添加如下配置,重启数据库生效。 host all xxx(dbuser)
政策如下: 实时迁移商用链路针对每一个入云迁移任务实行7天免费(免配置费用),7天后收取配置费用,降低数据上云门槛。 实时迁移和实时同步商用链路在定价上执行长期优惠策略,降低围绕云的数据传输门槛。 您可以通过DRS提供的DRS价格计算器,选择您需要的配置规格,来快速计算出参考价格。
测试连接时输入的端口号无法访问,请检查端口是否存在。如果端口正确,需检查防火墙是否放开。 目标数据库为PostgreSQL,数据库配置文件pg_hba.conf缺少对数据库账号的配置,建议配置该账号的远程连接权限。 打开配置文件pg_hba.conf,添加如下配置,重启数据库生效。 host all xxx(dbuser)
重置同步任务 在实时同步过程中,对于以下同步状态的任务,可通过重置功能,重新开始同步而不用再次配置任务。 同步暂停状态。 同步失败状态。 目前DRS支持重置的同步链路可参考支持重置的链路。 DRS重置功能不会清空目标库,客户需要根据自己的需求选择是否清空目标库。 全量、全量+增量
数据加工 数据复制服务支持对同步的对象进行加工,即可以为选择的对象添加规则。各链路支持的加工规则不一样,目前仅部分链路支持数据加工,支持数据加工链路参考表1,具体操作方法可参考对应的内容。 表1 支持数据加工的链路 同步方向 数据流向 数据过滤 附加列 列加工 入云 MySQL->MySQL
但有时候存在无法自动修复的场景,比如源日志被人为强制清理,导致无法继续迁移任务,则可通过重置功能,重新开始迁移而不用再次配置任务。 DRS目前支持以下迁移链路的重置: MySQL->MySQL MySQL->DDM MySQL->TaurusDB MySQL分库分表->DDM Redis->GeminiDB
分片集群MongoDB迁移前清除孤儿文档 什么是孤儿文档 MongoDB负载均衡器(Balancer)会根据集合的分片键(Shard key)均衡数据。Balancer的工作原理是:需要Balancer的数据块(Chunk)先复制到目标Shard,成功后再删除原Shard上的Ch
迁移时长预估 由于影响迁移时长的因素很多,因此没有通用的计算方式能准确的计算迁移耗时,用户可先参考实时同步链路规格说明进行评估。建议用户先使用和待迁移实例相同规格、负载、网络配置、数据模型的环境创建测试任务,以评估迁移时长。 迁移速度提升 全量: 如果受限于跟源库或目标库的网络带宽限制,需要扩大带宽;
由于订阅任务当前存在较多订阅对象和操作约束,推荐使用性能、稳定性更高的MySQL到Kafka同步链路进行数据订阅。 数据订阅与MySQL到Kafka同步的区别可参考这里。 更多到Kafka的同步链路可参考实时同步方案概览。 使用须知 数据订阅功能通过创建订阅任务来获取数据库中关键业务的数