检测到您已登录华为云国际站账号,为了您更好的体验,建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
描述 IP地址或域名 源数据库DB2 for LUW的IP地址或域名。 端口 源数据库DB2 for LUW服务端口,可输入范围为1~65535间的整数。 数据库用户名 源DB2 for LUW的数据库账号。 数据库密码 源数据库账号所对应的密码。 数据库名 源DB2 for LUW中同步对象所属数据库的名称。
本实践使用DRS的实时同步功能将本地Oracle数据库实时同步至华为云DDM。通过全量+增量同步,实现源数据库Oracle和目标数据库DDM的数据长期同步。 前提条件 拥有华为云实名认证账号。 账户余额大于等于0元。 服务列表 虚拟私有云 VPC 分布式数据库中间件DDM 数据复制服务 DRS
修改同步模式 DRS支持在任务创建后修改同步任务模式。 约束限制 目前仅支持MySQL->GaussDB(for MySQL)同步任务修改任务模式。 支持单增量到全量+增量、全量+增量到单增量的修改方式。 支持状态为配置中、增量中、增量失败的任务进行修改。 操作步骤 在“实时同步
描述 IP地址或域名 源数据库DB2 for LUW的IP地址或域名。 端口 源数据库DB2 for LUW服务端口,可输入范围为1~65535间的整数。 数据库用户名 源DB2 for LUW的数据库账号。 数据库密码 源数据库账号所对应的密码。 数据库名 源DB2 for LUW中同步对象所属数据库的名称。
主键列复制属性的校验 PostgreSQL为源的全量+增量和单增量任务同步时,对源数据库待同步表的主键列复制属性进行检查。源数据库中表的主键列toast属性为main、external、extended时,其replica identity属性必须为full。 不通过原因 同步表
描述 IP地址或域名 源数据库DB2 for LUW的IP地址或域名。 端口 源数据库DB2 for LUW服务端口,可输入范围为1~65535间的整数。 数据库用户名 源DB2 for LUW的数据库账号。 数据库密码 源数据库账号所对应的密码。 数据库名 源DB2 for LUW中同步对象所属数据库的名称。
源数据库类型选择“ECS自建库”可见,源数据库的IP地址或域名。 数据库实例名称 源数据库类型选择“DDS实例”可见,选择作为源数据库的DDS实例。 账号认证数据库 填写的数据库账号所属的数据库名称。例如:华为云DDS实例默认的账号认证数据库为admin。 数据库用户名 源数据库的用户名。 数据库密码 源数据库的用户名所对应的密码。
默认为创建同步任务时选择的GaussDB(DWS)实例,不可进行修改。 数据库用户名 目标数据库对应的数据库用户名。 数据库密码 数据库用户名和密码将被系统加密暂存,直至该任务删除后清除。 目标数据库的用户名和密码将在同步过程中被加密暂存到数据库和同步实例主机上,待该任务删除后会永久清除。 在“设置
DRS任务引擎类型。 缺省值:mysql 取值: mysql:MySQL到MySQL迁移,MySQL到MySQL同步 mongodb:MongoDB到DDS迁移 cloudDataGuard-mysql:MySQL到MySQL灾备 gaussdbv5:GaussDB同步 mysql-to-kafka:MySQL到Kafka同步
重置同步位点 对于MySQL->GaussDB(DWS)的实时同步链路,DRS支持增量位点重置功能,可根据用户选择的重置位点时间,将同步任务调整到问题发生之前,重新同步。 约束限制 目前仅支持引擎为MySQL->GaussDB(DWS)的同步任务支持重置位点。 任务在增量阶段时,需要先暂停任务,再进行重置位点。
表7 源库信息 参数 描述 数据库实例名称 默认为创建同步任务时选择的DDS实例,不可进行修改。 账号认证数据库 填写的数据库账号所属的数据库名称。例如:华为云DDS实例默认的账号认证数据库为admin。 数据库用户名 源数据库的用户名。 数据库密码 源数据库的用户名所对应的密码。 SSL安全连接
将DDM同步到DDM 支持的源和目标数据库 表1 支持的数据库 源数据库 目标数据库 DDM实例 DDM实例 数据库账号权限要求 在使用DRS进行同步时,连接源库和目标库的数据库账号需要满足以下权限要求,才能启动实时同步任务。不同类型的同步任务,需要的账号权限也不同,详细可参考表
检查目标库的max_allowed_packet参数 MySQL迁移场景 表1 检查目标库的max_allowed_packet参数 预检查项 检查目标库的max_allowed_packet参数。 描述 目标库的max_allowed_packet参数值小于100MB,导致目标库无法写入造成全量迁移失败。
Explorer可以自动生成SDK代码示例,并提供SDK代码示例调试功能。 接口约束 目前仅支持Oracle->GaussDB分布式、MySQL->Kafka、GaussDB(for MySQL)->Kafka同步场景。 调用该接口删除任务前,请确保任务处于已结束状态。 仅支持部分Region使用,详情参考终端节点。
ip 是 String 数据库IP。 db_port 否 Integer 数据库端口,Mongo、DDS必填为0。 inst_id 否 String 数据库实例ID。数据库为云上实例时,比如RDS实例时必填。 db_user 是 String 数据库账号。 db_password
Explorer中调试该接口,支持自动认证鉴权。API Explorer可以自动生成SDK代码示例,并提供SDK代码示例调试功能。 接口约束 目前仅支持MySQL->MySQL迁移和同步场景。 URI GET /v5/{project_id}/jobs/template 表1 路径参数 参数 是否必选 参数类型
步源库表结构及其他数据库对象。用户需要在目标库根据源端逻辑库的表结构,自行在目标库创建对应的表结构及索引。更对约束限制可参考DRS使用须知。 操作步骤 登录华为云控制台。 单击管理控制台左上角的,选择区域。 单击左侧的服务列表图标,选择“数据库 > 分布式数据库中间件 DDM”,进入DDM管理控制台。
不限速:对迁移速度不进行限制,通常会最大化使用源数据库的出口带宽。该流速模式同时会对源数据库造成读消耗,消耗取决于源数据库的出口带宽。比如:源数据库的出口带宽为100MB/s,假设高速模式使用了80%带宽,则迁移对源数据库将造成80MB/s的读操作IO消耗。 调试 您可以在API
当时延为0s时,说明源数据库和目标数据库的数据是实时同步的。 时延 = 源库当前系统时间 - 成功同步到目标库的最新一个事务在源库的提交成功时间。 一个事务同步的完整过程如下: 源端数据库的抽取; 经过网络的传输; 由DRS进行日志解析; 最终在目标数据库上的执行完成。 这样完成
原因5:目标库规格受限,达到写入瓶颈。以目标实例为RDS for MySQL为例,用户可以在RDS控制台查看数据库性能指标。 原因6:可能存在热点更新。无主键表的写入会导致热点更新,源库对单一表或单一行的高频更新也会导致热点更新,从而导致时延增大。以RDS for MySQL为例,可以通过RDS的审计日志进行确认,详情可参考RDS审计日志。