检测到您已登录华为云国际站账号,为了您更好的体验,建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
MySQL分库分表迁移到DDM 方案概述 资源规划 通过DRS迁移MySQL分库分表总流程 实施步骤 父主题: 实时迁移
目标数据库引擎 MySQL 本示例中目标数据库也是MySQL,使用的云数据库 RDS for MySQL实例。 网络类型 VPC网络 本示例中采用“VPC网络”。 父主题: 自建MySQL迁移到RDS for MySQL
操作流程 构建MySQL服务器、购买RDS实例,并且将MySQL服务器数据迁移到RDS实例的整个流程的主要任务流如图1所示。 图1 流程图 父主题: 自建MySQL迁移到RDS for MySQL
服务列表 虚拟私有云 VPC 云数据库 GaussDB 数据库和应用迁移 UGO 数据复制服务 DRS 数据管理服务 DAS 使用说明 本实践的资源规划仅作为演示,实际业务场景资源以用户实际需求为准。 本实践端到端的数据为测试数据,仅供参考。
DRS同步任务 同步任务名 DRS-MySQLToKafka 自定义 源数据库引擎 MySQL 本示例中源数据库为MySQL,使用的华为云RDS实例。 目标数据库引擎 Kafka 本示例中目标数据库为Kafka。 网络类型 VPC网络 本示例中采用“VPC网络”。
单击左侧的服务列表图标,选择“数据库 > 云数据库 TaurusDB”。 在“实例管理”页面,单击“购买数据库实例”。 配置实例名称和实例基本信息。 选择实例规格。 选择实例所属的VPC和安全组、配置数据库端口。 VPC和安全组已在创建VPC和安全组中准备好。 配置实例密码。
16:源数据库执行SQL超时 17:目标数据库执行SQL超时 18:源数据库执行SQL错误 19:目标数据库执行SQL错误 20:源库和目标库都不存在 21:源库不存在 22:目标库不存在 23:行数为亿行,未进行对比 27:超时 type 否 String 类型。
DDM ReadOnlyAccess:分布式数据库中间件服务只读权限。 DDS ReadOnlyPolicy:文档数据库服务资源只读权限。 RDS ReadOnlyAccess:关系型数据库服务资源只读权限。
checkpoint String 数据源库位点。 status Integer DDL告警状态。0无告警,1告警中。 ddl_timestamp Long DDL在源库执行时间。 ddl_text String DDL内容。
TRANSFERRING:恢复中 SUCCESS:成功 FAILED:失败 PRECHECK FAILED:预检查失败 dbs_instance_ids 否 Array of strings 数据库实例ID,最大数量为10。 description 否 String 描述。
GaussDB分布式版为源强制结束任务 本小节介绍GaussDB分布式版为源的增量、全量+增量同步链路在强制结束任务后如何清理源库可能残留的逻辑复制槽。 操作步骤 DRS使用的复制槽名可在DRS任务同步日志页面查看“create replication slot[复制槽名] successfully
GaussDB集中式版为源强制结束任务 本小节介绍GaussDB集中式版为源的增量、全量+增量同步链路在强制结束任务后如何清理源库可能残留的逻辑复制槽。 操作步骤 DRS使用的复制槽名可在DRS任务同步日志页面查看“create replication slot[复制槽名] successfully
创建UGO任务 创建数据库评估任务 创建对象迁移任务 父主题: 本地Oracle同步到GaussDB集中式版
支持审计操作的关键列表 云审计服务是安全解决方案中专业的日志审计服务,记录了数据复制服务的相关操作事件,方便您日后的查询、审计和回溯。
目标库实例状态检查 目标数据库实例状态是否正常 目标数据库是否冲突 目标库是否存在只读实例 目标数据库只读实例状态检查 扩展插件合法性检查 目标库是否存在已配置数据库 目标库实例是否正常 目标库空库检查 目标库表存在外键并且没有禁用 目标数据库已存在的表中有启用的触发器 父主题:
MongoDB链路时延增高可能原因 涉及链路 MongoDB->DDS入云迁移 DDS->MongoDB出云迁移 DDS->MongoDB出云同步 可能原因 DRS在任务增量阶段,为保证迁移/同步/灾备的性能,会集合级的进行并发回放。如果出现以下特殊情况,DRS只支持单线程写入,不支持并发回放
适用于业务数据量较大,需要长期同步,并对中断时间有严格要求的场景。 单AZ任务:采用单个节点部署架构,每个任务只创建一个节点,性价比较高。适用于业务数据量较小,短期同步,并对中断时间无严格要求的场景。 目前仅部分链路支持任务类型的选择,详细说明可参考双AZ任务倒换。
创建对象级对比任务 功能介绍 创建对象级对比任务。 URI POST /v3/{project_id}/jobs/{job_id}/object/compare 表1 路径参数 参数 是否必选 参数类型 描述 project_id 是 String 租户在某一Region下的Project
同步前准备 UGO权限准备 创建UGO评估项目,需要对源库进行预检查,Oracle为源库时预检查项如表1所示: 表1 预检查项 预检查权限 检查含义 是否必须通过 DBMS_METADATA权限 检查用户是否具有从Oracle数据库字典中检索元数据的权限,该权限用来获取Schema
配置同步实例信息,选择“数据流动方向”、“源数据库引擎”、“目标数据库引擎”、“网络类型”、“目标数据库实例”、“同步实例所在子网”(非必选)、“同步模式”,选择“规格类型”和“可用区”、,选填“标签”。 图1 同步实例信息 单击“开始创建”,等待实例状态变为“配置”。