检测到您已登录华为云国际站账号,为了您更好的体验,建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
图5 源库信息页面 表9 源库信息 参数 描述 数据库实例名称 默认为创建同步任务时选择的RDS for MariaDB数据库实例,不可进行修改。 数据库用户名 源数据库对应的数据库用户名。 数据库密码 源数据库的登录密码。 源数据库的IP地址或域名、数据库用户名和密码,会被系统
适用于单表的查询场景,可以提高单表读写性能,推荐使用此选项。 全部投递到Partition 0 适用于有事务要求的场景,写入性能比较差,如果没有强事务要求,不推荐使用此选项。 按表的主键值hash值投递到不同的Partition 适用于一个表一个Topic的场景,避免该表都写到同
数据备份迁移任务的状态和说明,请参见表1。 表1 备份迁移任务状态和说明 状态 说明 恢复中 正在进行备份文件到目标数据库的迁移任务。 成功 备份文件到目标数据库的迁移任务执行成功。 失败 备份文件到目标数据库的迁移任务执行失败。 预检查失败 校验备份文件存在不可用。 已删除的迁移任务在状态列表中不显示。
全量同步对象类型 全量同步对象类型,可选同步表结构、同步数据、同步普通索引,根据实际需求进行选择要同步内容。 同步数据为必选项。 选择同步表结构的时候目标库不能有同名的表。 不选同步表结构的时候目标库必须有相应的表,且要保证表结构与所选表结构相同。 增量阶段冲突策略 该冲突策略特指
可能原因:目标库删除了表。 解决方案:按照被删除的表结构,在目标库重新创建对应的表,然后重试DRS任务。 目标库删除表的同时,也删除了表中的数据,因此即使重新建表恢复任务,也可能导致该表数据不一致或任务再次失败。 父主题: PostgreSQL->PostgreSQL实时同步
企业业务高速发展,传统数据库扩容性差,迫切需要分布式化改造。 传统数据库需要自购并安装服务器、系统、数据库等软件,运维成本高、难度大。 传统数据库性能瓶颈问题,复杂查询性能较差。 如何不中断业务并且平滑的实现数据同步。 迁移原理 本次实践中UGO负责异构数据库结构对象迁移,DRS仅同步数据,原理如下: 使用UGO先完成基本对象的同步。
/v5/{project_id}/jobs/clone 表1 路径参数 参数 是否必选 参数类型 描述 project_id 是 String 租户在某一Region下的Project ID。 获取方法请参见获取项目ID。 请求参数 表2 请求Header参数 参数 是否必选 参数类型
e/result/file 表1 路径参数 参数 是否必选 参数类型 描述 project_id 是 String 租户在某一Region下的Project ID。 获取方法请参见获取项目ID。 job_id 是 String 任务ID。 请求参数 表2 请求Header参数 参数
全量同步分为表结构同步(含索引)、数据同步两个阶段,任务中只要有一个表的结构在目标库中创建成功即进入数据同步阶段。若同步完成产生失败表,再启动时将只同步数据,不同步表结构信息,用户必须手动在目标库中建表。 全量同步分区表的结构时会将该对象转为非分区的普通表。 全量同步表结构时只支持
迁为目的,而实时同步是维持不同业务之间的数据持续性流动。 常用场景:实时分析,报表系统,数仓环境。 特点:实时同步功能聚焦于表和数据,并满足多种灵活性的需求,例如多对一、一对多,动态增减同步表,不同表名之间同步数据等。 图3 多对一实时同步 数据订阅 数据订阅是指获取数据库中关键
全量同步分为表结构同步(含索引)、数据同步两个阶段,任务中只要有一个表的结构在目标库中创建成功即进入数据同步阶段。若同步完成产生失败表,再启动时将只同步数据,不同步表结构信息,用户必须手动在目标库中建表。 全量同步分区表的结构时会将该对象转为非分区的普通表。 全量同步表结构时只支持
不支持默认值含有表达式的函数的表的同步。 不支持同步源库中的临时表。 不支持同步源库中执行的DDL语句。 不支持GaussDB(DWS)的无主键复制表,如果需要同步的表在GaussDB(DWS)为无主键复制表,会导致任务失败。 全量+增量任务不支持带XML字段的无主键表。 浮点数类型
TIMESTAMP BYTEA 支持 XML CLOB 支持 CHAR CHARACTER 支持,如果源库该类型的字段含有占用超过一个字节的字符,需适当增加目标库该字段的长度。 VARCHAR CHARACTER VARYING() 支持 VARCHAR(max) CLOB 支持 NCHAR
DRS是否支持只迁移表结构不迁移数据 DRS是用于数据实时传输的云服务,暂不支持只迁移结构而不迁移数据。各链路支持的对象范围可在具体链路说明查看。 实时迁移方案概览 实时同步方案概览 实时灾备方案概览 父主题: 产品咨询
通过云审计服务,您可以记录数据复制服务的相关操作事件,方便您日后的查询、审计和回溯。具体内容请参见支持审计的关键操作列表。 日志 DRS任务日志记录了数据迁移过程中的信息,包含告警、错误和提示等类型的信息。您可以通过查看日志信息,帮助您分析系统中存在的问题,进行任务修复。具体操作请参见查看迁移日志。 父主题: 安全
root、或其他有Sysadmin角色的DATABASE用户、或使用数据库的OWNER用户登录数据库 ,赋予用户SCHEMA下表的DML相关权限(SELECT权限在处理无主键表时需要)。 授予SCHEMA下所有表的DML权限:GRANT SELECT, UPDATE, INSERT, DELETE
TABLE_NAME='大写表名'; 该表名在查询结果中有记录,即可满足DRS增量同步要求。 如果不满足要求,可执行以下sql语句开启表级ALL级别补全日志。 alter database add supplemental log data; alter table SCHEMA名.表名 add
source database may have a long transaction: ****. 可能原因 报错信息中包含detail:Read timed out:DRS启动任务后,DRS增量抓取在源端数据库创建逻辑复制槽时由于长事务阻塞,或者创建逻辑复制槽的过程中数据库未找到一致性位点,等待创建超时。
VARINT。 支持表级同步或导入对象文件: 全量同步过程仅支持表数据、表结构的同步。 不支持同步表级TTL和列级TTL。 不支持同步表中包含FROZEN、TUPLE、USER-DEFINED TYPE类型的字段。 使用导入对象文件选表的方式时,要保证导入的表在源库存在或对同步用
如果不存在,可在管理控制台右上角,选择“工单 > 新建工单”,联系DRS客服调大DRS的连接超时参数来解决。 父主题: PostgreSQL->PostgreSQL实时同步