检测到您已登录华为云国际站账号,为了您更好的体验,建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
增量同步 查看时延监控:全量同步完成后,开始进行增量同步。对于增量同步中的任务,您可单击任务名称,在“同步进度”页签下,查看增量同步同步时延,当时延为0s时,说明源数据库和目标数据库的数据是实时同步的。您也可以使用“同步对比”页签进行一致性对比。 图10 查看时延监控 查看同步对比:
_names等于0的同步。 目标数据库要求 目标数据库实例的运行状态必须正常。 目标数据库实例必须有足够的磁盘空间。 操作须知 若专属计算集群不支持4vCPU/8G或以上规格实例,则无法创建同步任务。 由于无主键表缺乏行的唯一性标志,网络不稳定时涉及少量重试,表数据存在少量不一致的可能性。
支持的源和目标数据库 表1 支持的数据库 源数据库 目标数据库 GeminiDB Redis 本地自建Codis集群(开源Codis 3.0及以上版本) ECS自建Codis集群(开源Codis 3.0及以上版本) 本地自建Redis单机版(2.8.x、3.0.x、3.2.x、4.0.x、5
格式为{ "ts" : Timestamp(<timestamp>, <inre>) },转换成timestamp:incre格式即可。 集群无法从mongos上查询oplog,timestamp可以根据需要启动的时间,转换成unix timestamp格式,incre为1。 例
支持的源和目标数据库 表1 支持的数据库 源数据库 目标数据库 GeminiDB Redis 本地自建Codis集群(开源Codis 3.0及以上版本) ECS自建Codis集群(开源Codis 3.0及以上版本) 本地自建Redis单机版(2.8.x、3.0.x、3.2.x、4.0.x、5
用的还是非ROW格式的binlog写入。 安全设置global级binlog_format=ROW的步骤 通过MySQL官方客户端或者其它工具登录源数据库。 在源数据库上执行全局参数设置命令。 set global binlog_format = ROW; 在源数据库上执行如下命令确认上面操作已执行成功。
目标库使用gsloader等工具创建相关系统表(如 public.pgxc_copy_error_log,public.gs_copy_summary)时,DRS访问相关系统表需要有系统表的all privilege权限,详细信息可参考《GaussDB工具参考》。 建议创建单独用于
目标库使用gsloader等工具创建相关系统表(如 public.pgxc_copy_error_log,public.gs_copy_summary)时,DRS访问相关系统表需要有系统表的all privilege权限,详细信息可参考《GaussDB工具参考》。 建议创建单独用于
目标库使用gsloader等工具创建相关系统表(如 public.pgxc_copy_error_log,public.gs_copy_summary)时,DRS访问相关系统表需要有系统表的all privilege权限,详细信息可参考《GaussDB工具参考》。 建议创建单独用于
Oracle归档日志文件大小必须大于单条数据最大值,避免单条数据日志跨文件(超过2个日志文件)导致的增量数据解析异常。 对于Oracle RAC集群,建议使用SCAN IP+ SERVICE_NAMES方式创建任务,SCAN IP具有更强的容错性,更好的负载能力,更快的同步体验。 源库为Oracle
这些写入的数据会一直同步至目标库中,直到任务结束。下面我们模拟写入另外的数据。 根据本地的Oracle数据库的IP和地址,通过数据库连接工具连接数据库。 执行如下语句,在源库插入一条数据。 我们插入一条“id”为1的数据。 insert into test_info.DATATYPELIST
目标库为社区Kafka。 Kafka的auto.create.topics.enable参数建议为false。 其他使用须知: 若专属计算集群不支持4vCPU/8G或以上规格实例,则无法创建同步任务。 库级同步时,增量同步中的任务,不支持“编辑”操作。 表级同步时,增量同步中的任
将DDM同步到GaussDB(DWS) 支持的源和目标数据库 表1 支持的数据库 源数据库 目标数据库 DDM实例 GaussDB(DWS)集群(8.1.3、8.2.0版本) 数据库账号权限要求 在使用DRS进行同步时,连接源库和目标库的数据库账号需要满足以下权限要求,才能启动实时
目标数据库实例必须有足够的磁盘空间。 目标数据库的时区设置必须与源数据库一致。 目标库中需要同步的数据库(用户)具有RESOURCE权限。 操作须知 若专属计算集群不支持4vCPU/8G或以上规格实例,则无法创建同步任务。 数据类型不兼容时,可能引起同步失败。 对于表中的物理生成列,如果列是根据一个时
VARBINARY 支持 ROWID - VARCHAR(18) 支持 执行如下步骤在源库构造数据: 根据本地的Oracle数据库的IP地址,通过数据库连接工具连接数据库。 根据支持的数据类型,在源库执行语句构造数据。 创建一个测试用的用户。 create user test_info identified
目标库使用gsloader等工具创建相关系统表(如 public.pgxc_copy_error_log,public.gs_copy_summary)时,DRS访问相关系统表需要有系统表的all privilege权限,详细信息可参考《GaussDB工具参考》。 建议创建单独用于
目标库为社区Kafka。 Kafka的auto.create.topics.enable参数建议为false。 其他使用须知: 若专属计算集群不支持4vCPU/8G或以上规格实例,则无法创建同步任务。 源库必须为华为云RDS for PostgreSQL实例。 库级同步时,增量同步中的任务,不支持“编辑”操作。
账号连通性:确保源库和目标库允许DRS通过用户名和密码访问。 图5 源库信息 表9 源库信息 参数 描述 容灾同步 开启后表示源数据库是容灾集群部署形态,IP地址或域名必须填入容灾集群所有节点的信息。 IP地址或域名 输入GaussDB的IP,请确保所填写的多个IP地址或域名属于同一个实例,且请填写所有主备实例的IP。
数据库IP。 mongo_ha_mode String mongo ha模式。 safe_mode Integer MRS集群运行模式,取值: 0:普通集群 1:安全集群 ssl_cert_password String SSL证书密码,证书文件后缀为.p12。 ssl_cert_check_sum
目标库使用gsloader等工具创建相关系统表(如 public.pgxc_copy_error_log,public.gs_copy_summary)时,DRS访问相关系统表需要有系统表的all privilege权限,详细信息可参考《GaussDB工具参考》。 目标库为M兼容模式时,需要配置Sysadmin角色。