检测到您已登录华为云国际站账号,为了您更好的体验,建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
使用前必读 概述 调用说明 终端节点 约束限制 基本概念
vpc-src-172 子网网段172.16.0.0/16 1 源端DDM实例 Autotest-DDM-SRC-001 规格4vCPUs | 8GB 节点数:2个 逻辑库名称:db_test_info 数据库用户:test_info 1 源端DDM关联的RDS实例 Auto-ddm-Single-SRC-001
将会自动结束,以免产生不必要的费用。 同步任务提交后,您可在“实时同步管理”页面,查看并管理自己的任务。 您可查看任务提交后的状态,状态请参见任务状态说明。 在任务列表的右上角,单击刷新列表,可查看到最新的任务状态。 对于未启动、状态为配置中的任务,DRS默认保留3天,超过3天D
“启动任务”,提交反向同步任务。 反向同步任务提交后,您可在“实时同步管理”页面,查看并管理自己的任务。 您可查看任务提交后的状态,状态请参见任务状态说明。 在任务列表的右上角,单击刷新列表,可查看到最新的任务状态。 等待反向任务状态到增量中,双向任务可进行倒换,详细可参考双向同步任务倒换。
可选择一个或者多个可用区。实际业务场景推荐选择创建在不同的可用区,提升业务可靠性。 节点规格 通用增强型 8 核 | 16 GB - 节点个数 1 单节点存在高可用风险,在实际使用过程中,建议至少创建2节点。 DDM关联RDS实例 RDS实例名 rds-ddm01 自定义,易理解可识别。
注册华为账号并开通华为云,实名认证,准备待同步数据库、数据库连接账号、网络等。 步骤一:创建同步任务 选择源和目标数据库,创建并启动同步任务。 步骤二:查询同步进度 同步过程中,可以通过查看同步进度了解数据同步完成情况。 步骤三:对比同步项 使用DRS提供的对比功能,来确认源和目标数据库的数据是否一致性。 结束任务
DRS并发读取数据库时,会占用大约6-10个session连接数,需要考虑该连接数对业务的影响。 在网络无瓶颈的情况下,全量迁移会对源数据库增加约50MB/s的查询压力,以及占用2~4个CPU。 更多DRS对数据库的影响,可参考DRS对源数据库和目标数据库有什么影响。 建议您在启动任务时选择“稍后启动
此时可看到,子任务1为正向任务。 图1 方向转换前 查看子任务1灾备监控,主2显示禁止执行DDL状态。 图2 转换前灾备监控 单击任务“操作”列的“方向转换”。 在弹出对话框中单击“是”确认转换。 转换后,子任务灾备关系发生改变,子任务1成为反向任务。 图3 反向转换后 查看子任务1灾备监控,此时主1显示禁止执行DDL状态。
指定数据库表的列信息采集的ID,提交采集指定数据库表的列信息接口返回的ID。 offset 否 Integer 偏移量,表示查询该偏移量后面的记录。 limit 否 Integer 查询返回记录的数量限制。 请求参数 表3 请求Header参数 参数 是否必选 参数类型 描述 Content-Type
输入“策略名称”。在“策略内容”下配置包含以下内容的自定义策略,创建自定义策略操作请参见:创建自定义策略。 创建委托:iam:agencies:createAgency 查询委托列表:iam:agencies:listAgencies 给委托授权:iam:permissions:grantRoleToAgenc
您可以通过如下两种方式确保修改后的源库binlog_format格式立即生效。 方法一: 选择一个非业务的时间段,中断当前数据库上的所有业务连接。 通过如下命令查询当前数据库上的所有业务连接(所有的binlog Dump连接及当前连接除外)。 show processlist; 中断上面查出的所有业务连接。
校验规则 查看校验任务中校验任务的规则和详细信息。 操作步骤 在“校验任务管理”界面,选择指定的任务,单击任务名称。 页面跳转至“基本信息”,切换到“校验规则”页签,可查看当前校验任务的校验规则。 您可查看到选择的加工对象,规则作用对象,过滤条件等。 图1 校验规则 父主题: 校验任务管理
基于范围的分片键是根据分片键值把数据分成一个个邻接的范围,如果没有指定特定的分片类型,则基于范围的分片键是默认的分片类型。 特点:基于范围的分片键对于范围类型的查询比较高效,给定一个片键的范围,分发路由可以很简单地确定哪个数据块存储了请求需要的数据,并将请求转发到相应的分片中。 建议在分片键基数较大,
您可以通过如下两种方式确保修改后的源库binlog_format格式立即生效。 方法一: 选择一个非业务的时间段,中断当前数据库上的所有业务连接。 通过如下命令查询当前数据库上的所有业务连接(所有的binlog Dump连接及当前连接除外)。 show processlist; 中断上面查出的所有业务连接。
目标库返回错误,常见错误码: Error 91:目标库服务异常。 Error 133:目标库shard存在异常。 Error 10107:目标库主节点异常。 解决方案 此类报错为目标库返回的错误码,需要联系目标数据库工程师排查并解决。 父主题: MongoDB->DDS实时迁移
DRS并发读取数据库时,会占用大约6-10个session连接数,需要考虑该连接数对业务的影响。 在网络无瓶颈的情况下,全量同步会对源数据库增加约50MB/s的查询压力,以及占用2~4个CPU。 更多DRS对数据库的影响,可参考DRS对源数据库和目标数据库有什么影响。 建议您在启动任务时选择“稍后启动
操作请参考认证鉴权。 获取DRS的Endpoint。 调用接口前,您需要提前获取到地区和终端节点,即下文中的Endpoint值。 调用接口前,您需要提前联系企业管理员,获取地区和终端节点,即下文中的Endpoint值。 获取用户在某一Region下的Project ID,请参见获取项目ID。
页面跳转至“基本信息”,切换到“校验日志”页签选择“运行日志”,可查看当前校验任务的运行日志。 您可查看到日志对应的时间,级别和描述。 图1 校验日志 图2 运行日志 在“校验日志”页签选择“操作日志”,查看当前灾备任务的操作日志。 图3 操作日志 父主题: 校验任务管理
导致DRS任务无法获取到该日志。 源库节点或者日志存在问题,导致DRS获取日志进程失败报错。 网络原因影响源库日志拉取速度,导致DRS读取日志超时。 解决方案 如果DRS任务刚启动,等待约10分钟后,单击任务名称,在“同步日志”页签查看是否继续出现该报错日志。 否,DRS任务已获取到日志。
企业业务高速发展,传统数据库扩容性差,迫切需要分布式化改造。 传统数据库需要自购并安装服务器、系统、数据库等软件,运维成本高、难度大。 传统数据库性能瓶颈问题,复杂查询性能较差。 如何不中断业务并且平滑地实现数据同步。 迁移原理 本次实践中UGO负责异构数据库结构对象迁移,DRS仅同步数据,原理如下: 使用UGO先完成基本对象的同步。