数据仓库服务 GAUSSDB(DWS)-降低IO的处理方案:场景8:大量数据带索引导入
场景8:大量数据带索引导入
某业务场景数据往DWS同步时,延迟严重,集群整体IO压力大。
后台查看等待视图有大量wait wal sync和WALWriteLock状态,均为xlog同步状态。
触发因素:大量数据带索引(一般超过3个)导入(insert/copy/merge into)会产生大量xlog,导致主备同步慢,备机长期Catchup,整体IO利用率飙高。历史案例参考:实例长期处于catchup问题分析。
解决方案:
- 严格控制每张表的索引个数,建议3个以内。
- 大量数据导入前先将索引删除,导入完成后再重新建索引。
- 数据仓库服务GaussDB(DWS)_SQL on Anywhere
- DWS产品介绍_DWS产品优势_DWS功能_DWS使用场景_DWS是什么
- GaussDB索引_GaussDB数据库索引_高斯数据库索引_华为云
- DWS安全_数据仓库服务安全_DWS数据安全管理_DWS安全保障_DWS安全策略
- GAUSS(DWS)工具_gsql工具_DataStudio工具_DSC工具
- GaussDB(DWS)常用SQL_常用SQL命令_SQL语法
- 调用GaussDB(DWS) API接口_数据仓库服务调用API_如何调用API_在DWS中调用API
- GaussDB索引_华为数据库GaussDB_高斯数据库索引_华为云
- GaussDB(DWS)服务_什么是IoT数仓_如何使用IoT数仓
- 云数据迁移_什么是CDM_-华为云