检测到您已登录华为云国际站账号,为了您更好的体验,建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
确认同步任务执行结果 由于本次实践为增量同步模式,DRS任务会将源库的产生的增量数据持续同步至目标库中,直到手动任务结束。下面我们通过在源库RDS for MySQL中插入数据,查看Kafka的接收到的数据来验证同步结果。 操作步骤 登录华为云控制台。 单击管理控制台左上角的,选择区域“华南-广州”。
不通过原因:包含延迟约束的表有同步失败的风险。 处理建议:重建约束去除延迟属性。 删除约束SQL为: alter table 模式名.表名 drop CONSTRAINT 约束名; 添加约束SQL为: alter table 模式名.表名 add CONSTRAINT 约束名 约束类型(字段列表) NOT DEFERRABLE;
租户在某一Region下的Project ID。 获取方法请参见获取项目ID。 job_id 是 String 租户在某一Region下的Job ID,如果是主备任务,使用父任务ID。 获取方法请参见获取任务ID。 请求参数 表2 请求Header参数 参数 是否必选 参数类型 描述 Content-Type
Server实例的最大并行度 迁移上云的数据库恢复模式是否为完整(FULL)模式,如果不是需要进行修改。 右击数据库选择属性,在弹出数据库属性框中选择选项,并在右侧确认该数据库恢复模式为完整(FULL),保证该数据库高可用和备份策略可执行。 图11 检查数据库恢复模式
源数据库信息检查 检查分片节点是否和mongos节点属于同一个集群 源数据库的均衡器状态检查 源库的实例类型检查 源库长事务检查 父主题: 预检查不通过项修复方法
传输过程中的完整性和机密性,但是会有一定的性能损耗。对同步性能敏感的场景下,需要平衡性能和安全的取舍。 通过网络访问控制,实现数据同步网络隔离 通过防火墙、ACL规则、安全组等进行网络访问控制,可以有效地控制DRS访问数据库的网络范围,也可以实现数据同步网络和其他网络的隔离,确保DRS链路的安全性。
OMPLETE、INCRE_TRANSFER_STARTED、INCRE_TRANSFER_FAILED、PAUSING时才能调用。 双主灾备时父任务不支持调用。 URI PUT /v3/{project_id}/jobs/batch-modify-pwd 表1 路径参数 参数 是否必选
实时灾备 批量查询RPO和RTO 父主题: API v3(推荐)
限流设置等。 网络质量和网络延迟 网络延迟越小(影响因素包括但不限于源库目标库和DRS实例地理位置的远近程度),迁移速度越快,耗时越少。网络质量差(比如丢包率高)会降低迁移速度。 DRS实例规格 DRS实例规格越大,迁移速度越快,耗时越少。 源数据的模型和分布 此类因素包括是否有
unexpectedly lost. 可能原因 DRS迁移实例和源数据库之间的网络带宽太小或不稳定。 源数据库负载太高。 解决方案 请联系源数据库运维人员检查源数据库负载,同时检查源数据库和迁移实例的网络是否有丢包。 父主题: MySQL->MySQL实时迁移和同步
MySQL->MySQL实时迁移和同步 MySQL->TaurusDB实时迁移和同步 MySQL->CSS/ES实时同步 PostgreSQL->PostgreSQL实时同步 Oracle为源实时同步 GaussDB为源实时同步 MySQL为源实时灾备 备份迁移 录制回放 数据对比
端会从最后的消费位点继续推送增量变更数据。 实时灾备基本原理 实时灾备的功能是通过实时复制技术实现两个数据库的数据容灾,底层技术原理和实时迁移是一致的,差异点主要是实时灾备支持正向数据同步和反向数据同步,且实时灾备为实例级别灾备,不支持选择库表。 录制回放基本原理 录制回放主要分
以使用VPN网络和公网网络两种方式进行迁移,您可以根据实际情况为本地MongoDB数据库开放公网访问或建立VPN访问。一般推荐使用公网网络进行迁移,该方式下的数据迁移过程较为方便和经济。 目标数据库的网络设置: 若通过VPN访问,请先开通VPN服务,确保源数据库和目标DDS网络互通。
需要根据源库实际的集群分片个数设置该值大小。 在“源库及目标库”页面,迁移实例创建成功后,填选源库信息和目标库信息,单击“源库和目标库”处的“测试连接”,分别测试并确定与源库和目标库连通后,勾选协议,单击“下一步”。 图6 源库信息页面 表5 源库信息 参数 描述 mongosIP地址或域名
在“源库及目标库”页面,待同步实例创建成功后,填选源库信息和目标库信息,单击“源库和目标库”处的“测试连接”,分别测试并确定与源库和目标库连通后,单击“下一步”。 测试连接时需要确保DRS任务与源库、目标库的连通性。 网络连通性:确保源库和目标库允许DRS访问,通常至少需要放通DRS的IP
任务生命周期 查看任务详情 修改任务信息 修改连接信息 修改流速模式 编辑迁移任务 续传迁移任务 目标库实例解除只读 重置迁移任务 暂停迁移任务 克隆迁移任务 结束迁移任务 删除迁移任务 批量导入任务 版本升级 任务状态说明 父主题: 任务管理
源数据库和目标数据库的相关配置、条件进行检查。主要的检查项和对应的处理建议请参考预检查项。除了预检查项目之外,您还需要注意的事情参见表4。 表4 注意事项 类型名称 使用和操作限制 使用限制 通用: 不允许修改、删除连接源和目标数据库的用户的用户名、密码、权限,或修改源和目标数据库的端口号。
SEQUENCE权限),源数据库为Oracle的增量迁移还需要日志解析权限。本小节主要介绍如何使用DRS设置最小化权限且独立的Oracle账号的具体操作。 全量迁移模式。 创建一个用户用于迁移,此处以User1为例。 参考命令:CREATE USER User1 IDENTIFIED BY pwd 其中User1为用户名,pwd为密码。
QL或负载状况。 目标库恢复正常后,在任务列表中,单击任务对应操作列的“续传”,重新提交任务。 父主题: MySQL->MySQL实时迁移和同步
待确认原因:源数据库是副本集,没有分片键配置。 处理建议:如果无法获取源数据库的分片键信息在目标库进行配置,源数据库的数据都会迁移到目标库分片集群的主shard节点,无法充分发挥集群的读写性能,存储能力和高可用特性,建议先在目标库对要迁移的集合进行分片配置,如何设置分片键请参考常见问题。 待确认原因:源数据库实例类型未知,没有分片键配置。