检测到您已登录华为云国际站账号,为了您更好的体验,建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
源数据库参数log_slave_updates检查 MySQL迁移时,为保证DRS能获取全部的Binlog日志,需要开启log_slave_updates参数。 不通过原因 源数据库log_slave_updates参数值为OFF。 处理建议 登录源数据库MySQL所在服务器。
原有功能整合至数据治理中心DataArts Studio服务。具体请参考数据治理中心 DataArts Studio的数据集成(实时作业)。 常见问题 DRS为什么要停售以GaussDB(DWS)、CSS/ES为目标库的链路? 为了更好的服务用户,一站式数据集成、开发、治理、开
pk write target db fail” 备份迁移 备份迁移失败,无法找到备份文件 备份迁移失败,提示备份的源数据库不在备份文件列表中 备份迁移失败,提示同名数据库已经存在 备份迁移失败,提示使用的是增量备份文件 备份迁移失败,提示使用的是日志备份文件 备份迁移失败,提示备份校验文件失败
操作场景 客户备份数据迁移上云时,报错:The number of the recovery database exceeds the threshold of the target database。 问题分析 恢复数据库数量超过目标数据库的阈值。 解决方案 请选择其他RDS for
不同链路,数据库和权限的要求也不同,可参考以下链接,选择对应链路查看使用须知: 支持的数据库版本 实时迁移方案概览 备份迁移方案概览 实时同步方案概览 数据订阅使用须知 实时灾备方案概览 网络准备 源数据库部署在本地 参考本地数据库到华为云进行网络准备。 源数据库为其他云数据库 参考其他云数据库到华为云进行网络准备。
修改任务信息 数据订阅任务创建成功后,支持对部分任务基本信息进行修改,以方便区分和识别订阅任务。 支持可修改的任务信息如下: 任务名称 描述 SMN主题 前提条件 已登录数据复制服务控制台。 操作步骤 在“数据订阅管理”页面,选择指定的订阅任务,单击任务名称。 进入“基本信息”页
如何设置MongoDB数据库分片集群的分片键 MongoDB数据库中数据的分片是以集合为基本单位的,集合中的数据通过片键被分成多部分。 对集合进行分片时,您需要选择一个片键 , 片键是每条记录都必须包含的,且建立了索引的单个字段或复合字段,MongoDB数据库按照片键将数据划分到不同的数据块中,
目标数据库安全规则设置: 目标数据库默认与DRS迁移实例处在同一个VPC,网络是互通的,DRS可以直接写入数据到目标数据库。 设置目标数据库所在VPC的安全组,确保DRS实例IP的出方向到本地数据数据库的IP、监听端口放通。具体设置如下图所示: 图1 出口规则 本地数据库实时迁移
华为云:负责云服务自身的安全,提供安全的云。华为云的安全责任在于保障其所提供的 IaaS、PaaS 和 SaaS 类云服务自身的安全,涵盖华为云数据中心的物理环境设施和运行其上的基础服务、平台服务、应用服务等。这不仅包括华为云基础设施和各项云服务技术的安全功能和性能本身,也包括运维运营安全,以及更广义的安全合规遵从。
SDK使用说明 数据订阅功能将数据库中关键业务的数据变化信息缓存并提供统一的SDK接口,方便下游业务订阅、获取、并消费。 在使用SDK消费之前,需要先在数据复制服务控制台创建数据订阅任务。 当订阅任务创建完成后,使用SDK可以实时订阅订阅通道中的增量数据。目前: 数据复制服务只提供JAVA版本SDK,SDK下载地址。
使用DRS将同Region同VPC的华为云ECS数据库迁移到华为云云数据库时,选择VPC网络其网络示意图如图1所示: 图1 网络示意图 源数据库为ECS自建数据库,源和目标数据库属于相同Region相同VPC,DRS使用VPC网络。需要确保源数据库入方向的网络ACL和安全组放通,源库添加
任务状态说明 数据订阅提供了多种任务状态,以便区分不同阶段的订阅任务。 数据订阅任务的状态和说明,请参见表1。 表1 数据订阅任务状态和说明 状态 说明 创建中 正在创建数据复制服务需要用到的数据订阅实例。 创建失败 创建数据订阅任务失败。 配置 数据订阅实例创建成功,但还没有启动任务,可以继续配置任务。
适配DDS5.0版本。 商用 迁移方案概览 2 录制回放。 录制回放支持AWS MySQL及AWS MariaDB作为源端。 商用 录制回放 2024年06月 序号 功能名称 功能描述 阶段 相关文档 1 数据对比。 MongoDB支持数据内容。 商用 数据对比 2 实时同步。 将Cassandra同步到GeminiDB
任务管理 查看任务详情 修改任务信息 编辑订阅任务 查看订阅数据 修改消费时间点 续传订阅任务 重置订阅任务 删除订阅任务 任务状态说明
您可选择删除订阅任务。被删除后的任务将不会再出现在任务列表中,请谨慎操作。 前提条件 已登录数据复制服务控制台。 删除任务 在“数据订阅管理”页面的任务列表中,选择要删除的任务,单击“删除”。 单击“是”,提交删除任务。 批量删除 在“数据订阅管理”页面,选择需要删除的任务, 单击左上方的“批量操作”,选择“批量删除”。
DRS对比任务取消后,数据库有对比任务的查询进程未结束 以源库Mysql数据库为例,进行行数对比,取消对比任务,在源库有对比任务的查询进程未及时结束,清理残留进程,按照如下步骤操作: 使用管理员权限用户登录Mysql数据库,执行show processlist; 按照Host和Command获取Id
对比失败 问题分析 由于对比的表数据模型比较特殊,对比任务无法自动分片对比,导致任务失败。 解决方案 重新创建内容对比任务,对比对象不勾选报错的表。 单击任务名称,进入基本信息页面。 以同步任务为示例,单击“同步对比”页签,进入“同步对比”信息页面。 选择“数据级对比”页签,单击“创建对比任务”。
虚拟私有云 VPC 云数据库 RDS 分布式消息服务Kafka 数据复制服务 DRS 数据管理服务 DAS 部署架构 本示例中,DRS源数据库为华为云RDS for MySQL,目标端为华为云同Region下的分布式消息服务Kafka,通过VPC网络,将源数据库的增量数据同步到目标端,部署架构可参考图1。
该函数主要用于定义增量数据的消费。当SDK接收到数据时,会通过notify通知ClusterListner消费数据。例如SDK使用模板的消费方式,就是将订阅数据打印到屏幕上。 该函数输入参数类型为:List <ClusterMessage>, 其中ClusterMessage为订阅数据存储的结构对象,具体定义详见表4。
对于不确定因素导致的失败任务,当前任务中断时间过长,任务无法续传时,可使用重置功能,从当前时间点重新进行数据订阅,可以无需重新配置。 约束限制 任务重置并启动后,任务的开始时间点为当前时间,并非任务创建时间。 操作步骤 在“数据订阅管理”页面的任务列表中,选择要重置的任务,单击操作列“重置”按钮。 在弹出