检测到您已登录华为云国际站账号,为了您更好的体验,建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
上传备份文件 本小节介绍了上传备份文件的方法。 创建OBS桶,并将备份文件上传OBS桶。 如果单次上传文件不大于5GB时,可以登录OBS控制台创建OBS自建桶,存储类别选择“标准存储”,桶策略选择“公共读”。 如果批量上传多个文件(单次最多支持100个文件同时上传,总大小不超过5
以创建多个partition,越多的partition可以提供更高的吞吐量,越多的partition会消耗更多的资源,建议根据broker节点的实际情况来设置partition的数量。 副本个数 同步Topic策略选择自动生成Topic名字时可见。 用来设置topic的副本数。每
如何判断数据迁移任务可以停止 您可参考以下方法,确认任务是否可以结束。结束之前您需要确认完成以下几点: 请您确认至少在业务低峰期有过一次完整的数据对比。 完成业务割接。 先中断业务(如果业务负载非常轻,也可以尝试不中断业务)。 在源数据库端执行如下语句(此处以MySQL为例),并
以创建多个partition,越多的partition可以提供更高的吞吐量,越多的partition会消耗更多的资源,建议根据broker节点的实际情况来设置partition的数量。 副本个数 同步Topic策略选择自动生成Topic名字时可见。 用来设置topic的副本数。每
这种非标浮点类型数据可能会有无法命中的风险导致数据灾备失败。 业务数据库配置 业务数据库必须为GaussDB(for MySQL)实例的主节点。 业务数据库的binlog日志必须打开,且binlog日志格式必须为Row格式。 在磁盘空间允许的情况下,建议业务数据库binlog保存时间越长越好,建议为7天。
INVISIBLE */, PRIMARY KEY (`id`)); 源数据库要求 源数据库必须为GaussDB(for MySQL)主备实例的主节点。 增量同步时,源数据库的binlog日志必须打开,且binlog日志格式必须为Row格式。 在磁盘空间允许的情况下,建议源数据库binlog保存时间越长越好,建议为3天。
同步方案概览 实时同步是指在不同的系统之间,将数据通过同步技术从一个数据源拷贝到其他数据库,并保持一致,实现关键业务的数据实时流动。 实时同步不同于迁移,迁移是以整体数据库搬迁为目的,而实时同步是维持不同业务之间的数据持续性流动。 常用场景:实时分析,报表系统,数仓环境。 同步特
迁移方案概览 由于安全原因,数据库的IP地址有时不能暴露在公网上,但是选择专线网络进行数据库迁移,成本又高。这种情况下,您可以选用数据复制服务提供的备份迁移,通过将源数据库的数据导出成备份文件,并上传至对象存储服务,然后恢复到目标数据库。备份迁移可以帮助您在云服务不触碰源数据库的情况下,实现数据迁移。
灾备任务结束后,灾备数据库也将变为读写状态。 外部数据库具有superuser权限的账号时,也可以实现作为灾备数据库时只读状态。 如遇DRS实例节点故障重建,任务恢复前为保证DRS任务在恢复过程中的数据一致性,会将本云为备数据库短暂设置为只读,任务正常后同步关系恢复正常。 是否开启Binlog快速清理
网络的方式进行数据同步和迁移。 公测 实时同步 表20 2019年3月版本变更 序号 功能名称 功能描述 阶段 相关文档 1 支持DDS单节点实例之间的迁移。 数据复制服务提供的在线迁移功能支持DDS实例之间的数据迁移。 公测 实时迁移 2 支持在线查看订阅数据。 数据复制服务支
密码访问。 图5 源库信息 表9 源库信息 参数 描述 容灾同步 开启后表示源数据库是容灾集群部署形态,IP地址或域名必须填入容灾集群所有节点的信息。 IP地址或域名 输入GaussDB的IP,请确保所填写的多个IP地址或域名属于同一个实例,且请填写所有主备实例的IP。 数据库用户名
密码访问。 图5 源库信息 表9 源库信息 参数 描述 容灾同步 开启后表示源数据库是容灾集群部署形态,IP地址或域名必须填入容灾集群所有节点的信息。 IP地址或域名 输入GaussDB的IP,请确保所填写的多个IP地址或域名属于同一个实例,且请填写所有主备实例的IP。 数据库用户名
密码访问。 图5 源库信息 表9 源库信息 参数 描述 容灾同步 开启后表示源数据库是容灾集群部署形态,IP地址或域名必须填入容灾集群所有节点的信息。 IP地址或域名 输入GaussDB的IP,请确保所填写的多个IP地址或域名属于同一个实例,且请填写所有主备实例的IP。 数据库用户名
密码访问。 图5 源库信息 表9 源库信息 参数 描述 容灾同步 开启后表示源数据库是容灾集群部署形态,IP地址或域名必须填入容灾集群所有节点的信息。 IP地址或域名 输入GaussDB的IP,请确保所填写的多个IP地址或域名属于同一个实例,且请填写所有主备实例的IP。 数据库用户名
实例操作 操作指定ID任务 采集数据库位点信息 结束任务 批量操作指定ID任务 批量结束任务 获取指定任务允许操作信息 获取查询数据库位点的结果 任务名称校验 更新增量任务启动位点 上传驱动文件(不再推广) 删除驱动文件(不再推广) 同步驱动文件(不再推广) 查询驱动文件列表(不再推广)
DRS增量阶段时延增高可能原因 问题现象 DRS在进行增量迁移或同步时,任务出现延迟高的现象。 可能原因 原因1:全量阶段刚结束,增量迁移延迟高。全量迁移过程中,源库增量数据还在不断地写入,DRS需要在全量结束之后,将这部分增量数据同步到目标端去,因此时延较高。 原因2:源库有大
增量同步失败报错,关键词“The replication slot does not exist and the task is not started for the first time.” 场景描述 增量同步期间DRS任务报错,日志提示信息:service LOGMANAGER
增量同步失败报错,关键词“The replication slot does not exist and the task is not started for the first time.” 场景描述 增量同步期间DRS任务报错,日志提示信息:service LOGMANAGER
全量阶段失败报错,关键字“Invalid GIS data provided to function st_geometryfromtext'” 场景描述 全量迁移或同步期间DRS任务报错,日志提示信息:An error occurred in the process DATAMOVE
数据订阅 支持的数据源类型 数据订阅支持的数据源类型包括: RDS for MySQL实例 支持的订阅对象 数据订阅的订阅对象可以为:表级订阅。 数据订阅将增量数据细分为数据变更(Data Manipulation Language 简称DML)和结构变更(Data Definition