华为云首页用户手册

云数据库 GAUSSDB-逻辑解码概述:注意事项

时间：2025-03-03 09:50:18

云数据库 GAUSSDB 逻辑解码

注意事项

逻辑解码不支持DDL。
在执行特定的DDL语句（如普通表truncate或分区表exchange）时，可能造成解码数据丢失。
不支持数据页复制的DML解码。
不支持解码分布式事务，当前机制为从DN解码，无法保证分布式事务一致性解码。
当执行DDL语句（如alter table）后，该DDL语句前尚未解码的物理日志可能会丢失。
使用逻辑解码功能时，禁止进行集群在线扩容。
单条元组大小不超过1GB，考虑解码结果可能大于插入数据，因此建议单条元组大小不超过500MB。
GaussDB 支持解码的数据类型为：INTEGER、BIGINT、SMALLINT、TINYINT、SERIAL、SMALLSERIAL、BIGSERIAL、FLOAT、DOUBLE PRECISION、DATE、TIME[WITHOUT TIME ZONE]、TIMESTAMP[WITHOUT TIME ZONE]、CHAR(n)、VARCHAR(n)、TEXT。
如果需要ssl连接需要保证前置条件guc参数ssl设置为on。
逻辑复制槽名称必须小于64个字符，仅支持小写字母、数字以及_?-.字符，且不支持“.”或“..”单独作为复制槽名称。
当逻辑复制槽所在数据库被删除后，这些复制槽变为不可用状态，需要用户手动删除。
不支持interval partition表复制。
对多库的解码需要分别在库内创建流复制槽并开始解码，每个库的解码都需要单独扫一遍日志。
不支持强切，强切后需要重新全量导出数据。
在事务中执行DDL语句后，该DDL语句与之后的语句不会被解码。
如需进行备机解码，需在对应主机上设置GUC参数enable_slot_log = on。
备机解码时，switchover和failover时可能出现解码数据变多，需用户手动过滤。Quorum协议下，switchover和failover选择升主的备机，需要与当前主机日志同步。
不允许主备，多个备机同时使用同一个复制槽解码，否则会产生数据不一致。
只支持主机创建删除复制槽。
数据库故障重启或逻辑复制进程重启后，解码数据可能存在重复，用户需自己过滤。
计算机内核故障后，解码可能存在乱码，需手动或自动过滤。
当前备机逻辑解码，不支持开启极致RTO。
请确保在创建逻辑复制槽过程中长事务未启动，启动长事务会阻塞逻辑复制槽的创建。
为解析某个astore表的UPDATE和DELETE语句，需为此表配置REPLICA IDENTITY属性，在此表无主键时需要配置为FULL，配置方式参照▪REPLICA IDENTITY { DEFA...字段。
禁止在使用逻辑复制槽时在其他节点对该复制槽进行操作，删除复制槽的操作需在该复制槽停止解码后执行。
基于目标库可能需要源库的系统状态信息考虑，逻辑解码仅自动过滤模式'pg_catalog'和'pg_toast'下OID小于16384的系统表的逻辑日志。若目标库不需要复制其他相关系统表的内容，逻辑日志回放过程中需要对相关系统表进行过滤。
在开启逻辑复制的场景下，如需创建包含系统列的主键索引，必须将该表的REPLICA IDENTITY属性设置为FULL或是使用USING INDEX指定不包含系统列的、唯一的、非局部的、不可延迟的、仅包括标记为NOT NULL的列的索引。
在逻辑复制槽使用完毕后，需及时删除，否则会阻塞xLog日志回收。
若一个事务的子事务过多导致落盘文件过多，退出解码时需执行SQL函数pg_terminate_backend(逻辑解码的walsender线程id)来手动停止解码，而且退出时延增加约为1分钟/30万个子事务。因此在开启逻辑解码时，若一个事务的子事务数量达到5万时，会打印一条WARNING日志。
当同一事务产生大量需要落盘的子事务时，同时打开的文件句柄可能会超限，需将GUC参数max_files_per_process配置成大于子事务数量上限的两倍。