检测到您已登录华为云国际站账号,为了您更好的体验,建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
同步对象中是否存在包含longtext或longblob类型字段的表 MySQL为源同步场景 表1 同步对象中是否存在包含longtext或longblob类型字段的表 预检查项 同步对象中是否存在包含longtext或longblob类型字段的表。 描述 longtext、lo
该参数的值,增加临时表空间上限。 等待数据库重启生效后,在DRS任务管理页面单击“续传”继续同步。同步任务结束后建议将该值调整回原始值,否则可能会因为临时表空间过大导致数据库实例磁盘满。 父主题: PostgreSQL->PostgreSQL实时同步
源库信息 表7 源库信息 参数 描述 数据库实例名称 默认为创建同步任务时选择的TaurusDB实例,不可进行修改。 数据库用户名 源数据库的用户名。 数据库密码 源数据库的用户名所对应的密码。 源数据库的数据库用户名和密码,会被系统加密暂存,直至删除该迁移任务后自动清除。 图7 目标库信息
通过创建事件触发器和函数实现PostgreSQL增量DDL同步 本小结介绍PostgreSQL->RDS for PostgreSQL实时同步,通过在源库创建事件触发器和函数获取源库的DDL信息,然后在DRS增量实时同步阶段实现DDL操作的同步。 前提条件 当前支持的DDL操作包含如下:
约束限制 目前仅支持引擎为MySQL->Kafka、TaurusDB->Kafka的任务进行大字段过滤。 创建任务时,用户可以在对象选择选择大字段过滤。任务启动后,可通过任务列表“操作”列的“大字段过滤”按钮进行设置。 对于失败状态的任务,设置完之后需要手动续传或重置使设置生效。
UGO结构迁移阶段1:表、主键、唯一键/索引等 选择创建对象迁移任务的UGO任务,在对象迁移页面,单击待迁移项目的“操作 > 迁移”。 在转换计划页面,显示待迁移项目采集对象及分类。 单击“下一步”,进入转换配置页面,单击每一项的“编辑”按钮可对该项进行转换配置。 单击“下一步”
务,实现同步过程中源业务和数据库继续对外提供访问。 “全量”: 该模式为数据库一次性同步,适用于可中断业务的数据库同步场景,全量同步将非系统数据库的全部数据库对象和数据一次性同步至目标端数据库。 “增量”: 增量同步通过解析日志等技术,将源端产生的增量数据同步至目标端。 是否开启Binlog快速清理
CP的子网。 同步模式 增量:增量同步通过解析日志等技术,将源端产生的增量数据同步至目标端。 全量+增量:该模式为数据库持续性同步,适用于对业务中断敏感的场景,通过全量同步过程完成目标端数据库的初始化后,增量同步阶段通过解析日志等技术,将源端和目标端数据库保持数据持续一致。 说明:
同步对象名称校验 源数据库如果存在不符合要求的数据库名、schema名或或表名,可能会导致迁移失败。 不通过原因 源数据库存在不符合要求的数据库名、schema名或表名,源数据库中库名、schema名及表名只能包含字母、下划线、中划线和数字。 处理建议 请修改不符合要求的对象名称,确保对象符合命名要求。
源库的schema名是否合法 PostgreSQL迁移场景 表1 源库的schema名是否合法 预检查项 源库的schema名是否合法。 描述 源数据库的schema名不支持 '" .字符,检查源数据库schema名是否合法,若存在不合法的字符,会导致实时同步失败。 不通过提示及处理建议
源数据库端: 全量同步需要用户具有CONNECT、DATAACCESS权限。 全量+增量同步需要用户具有DBADM权限。 选择全量+增量同步时,需要确保开启源数据库的归档日志,确保需要同步的表的Datacapture属性为Y。 目标数据库端必须同时拥有以下权限: 库级权限:需要使用root
源数据库端: 全量同步需要用户具有CONNECT、DATAACCESS权限。 全量+增量同步需要用户具有DBADM权限。 选择全量+增量同步时,需要确保开启源数据库的归档日志,确保需要同步的表的Datacapture属性为Y。 目标数据库端必须同时拥有以下权限: 库级权限:需要使用root
ta:目标库。 ls : 分片数据库。 当源库是集群时,数据库ip对应的endpointtype是so, 分片数据库对应的endpointtype是ls。 ip 是 String 数据库IP。 dbName 是 String 数据库名称。 instid 否 String 数据库实例ID,云上实例需要填写。
源库信息 表7 源库信息 参数 描述 数据库实例名称 默认为创建迁移任务时选择的TaurusDB实例,不可进行修改。 数据库用户名 源数据库的用户名。 数据库密码 源数据库的用户名所对应的密码。 源数据库的数据库用户名和密码,会被系统加密暂存,直至删除该迁移任务后自动清除。 图6 目标库信息
查询增量DDL列表 功能介绍 查询增量DDL列表,可根据status查询 URI GET /v5/{project_id}/jobs/{job_id}/ddl 表1 路径参数 参数 是否必选 参数类型 描述 project_id 是 String 租户在某一Region下的Project
previous_select String 上一次选择迁移对象或者同步对象的方式。 为空时表示当前还未选择需要的方式。 srcImportObject:当前任务上次选择的方式为导入方式。 import_level String 对象导入类型。 table:表级。 database:库级。 is_import_cloumn
单节点存在高可用风险,在实际使用过程中,建议至少创建2节点。 DDM关联RDS实例 RDS实例名 rds_ddm01 自定义,易理解可识别。 所属Region 测试Region 选择和自己业务区最近的Region,减少网络时延。 数据库版本 MySQL 5.7 - 实例类型 单机 本示例中为单机。 实
源库中表的复制属性检查 PostgreSQL、GaussDB为源增量同步场景 表1 源库中表的复制属性检查 预检查项 源库中表的复制属性检查 描述 检查源库中表的复制属性。 不通过提示及处理建 待确认原因:源库表中包含主键列,但是复制属性不为FULL。当源数据表发生更新时,如果表
将TiDB同步到TaurusDB 支持的源和目标数据库 表1 支持的数据库 源数据库 目标数据库 TiDB(4.0.0及以上版本,不包括dev版本) TaurusDB企业版、标准版 数据库账号权限要求 在使用DRS进行同步时,连接源库和目标库的数据库账号需要满足以下权限要求,才能启动实时同步任
增量同步失败报错,关键词“Table *** not found in target database” 场景描述 增量同步期间DRS任务报错,同步日志界面提示:service INCREMENT failed, cause by: Check table structure consistency