检测到您已登录华为云国际站账号,为了您更好的体验,建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
测试方法 总体流程 创建弹性云服务器ECS和数据仓库GaussDB(DWS) 构建TPC-H&TPC-DS使用数据 建表与数据导入 执行查询与结果收集
建表与导入TPC-DS数据 创建TPC-DS目标表 连接DWS数据库后执行以下SQL语句。 1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 19 20 21 22 23 24
Join,当使用cost_param的bit0为0时,估算Anti Join的行数与实际行数相差很大,导致查询性能下降。可以通过设置cost_param的bit0为1时,使Anti Join的行数估算更准确,从而提高查询性能。优化后的执行计划如下: 场景二:优化前 当cost_param的bit1(set
Join,当使用cost_param的bit0为0时,估算Anti Join的行数与实际行数相差很大,导致查询性能下降。可以通过设置cost_param的bit0为1时,使Anti Join的行数估算更准确,从而提高查询性能。优化后的执行计划如下: 场景二:优化前 当cost_param的bit1(set
的count),其中Scan花费43s,持续占用大量I/O,此类作业并发起来后,整体系统I/O持续100%,触发I/O瓶颈,导致整体性能慢。 对比相同数据量的列存表(A-rows均为40960000),列存的Scan只花费14ms,I/O占用极低。 触发因素:行存表因其存储方式的
execute direct on (cn_5001) 'SELECT PG_TERMINATE_BACKEND(pid)'; 父主题: 集群性能
建议在执行了大批量插入/删除操作后,例行对表或全库执行ANALYZE语句更新统计信息。 父主题: 基于表结构设计和调优提升GaussDB(DWS)查询性能
总体流程 图1 整体流程 父主题: 测试方法
查询。 如果设置了细粒度权限控制功能,只有配置了操作权限的用户才能使用终止查询按钮。只读权限用户登录后终止查询按钮为灰色。 父主题: 集群性能
内存 存储 单节点建议存储 查询性能(TPC-H 1000X) 版本 节点数 GaussDB(DWS) 8xlarge 32U 256G SSD云盘 6400GB 596.90s 8.1.3 3 测试结果 如下为scale=1000的TPC-H的性能测试结果,查询执行时间以秒(s)为单位。
内存 存储 单节点建议存储 查询性能(TPC-DS 1000X) 版本 节点数 GaussDB(DWS) 8xlarge 32U 256G SSD云盘 6400GB 1545.93s 8.1.3 3 测试结果 如下为scale=1000的TPC-DS的性能测试结果,查询执行时间以秒(s)为单位。
选择“监控 > 节点监控 > 概览”可查看当前集群各节点CPU使用率的具体情况,单击最右的监控按钮,查看最近1/3/12/24小时的CPU性能指标,判断是否有CPU使用率突然增大的情况。 设置异常规则及时终止高内存语句。 防止极端场景下某些语句使用内存过多,导致其他语句由于内存分
有走分区剪枝,导致了全表扫描,对于185亿条数据量的表,全表扫描性能会很差。 处理方法 在慢SQL的过滤条件中增加分区筛选条件,避免走全表扫描。 优化后的SQL和执行计划如下,性能从十几分钟,优化到了12秒左右,性能有明显提升。 1 SELECT passtime FROM tb_motor_vehicle
调大psort_work_mem。 1 show psort_work_mem; 再重新执行VACUUM FULL操作。 父主题: 集群性能
sql保存的位置: python3 gen_tpch_thpseq.py ./qgen 1000 tpch1000x_query 测试集 性能测试集中将执行以下22个查询SQL。 SQL1 1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16
TPC-DS测试集 您可以通过命令生成方法生成TPC-DS测试集,也可以直接通过脚本生成方法生成,另我们已经给出前面20个的TPC-DS测试集供您参考。 命令生成方法 TPC-DS标准99个SQL查询语句可用如下方法生成: 准备工作。生成TPC-DS查询语句前需要修改query_templates目录下的文件:
使用ANALYZE命令分析数据库。 ANALYZE命令更新所有表中数据大小以及属性等相关统计信息,该命令较为轻量级,可以经常执行。如果此命令执行后性能恢复或者有所提升,则表明AUTOVACUUM未能很好的完成它的工作,有待进一步分析。 检查查询语句是否返回了多余的数据信息。 例如,如果查
的数据写到磁盘上,内存中只保留正在使用的数据,这就是中间数据落盘的由来。当发生中间数据落盘时,称之为算子下盘。算子落盘空间太大除了会对查询性能有较大影响,还有可能导致数据库只读甚至磁盘满,因此DWS提供了用户算子空间限制,可以限制用户算子落盘的大小,在超限时查询报错退出。 哪些算子会发生下盘
建表与数据导入 GDS方式导入 父主题: 测试方法
FROM pg_stat_activity where usename not in ('dbadmin','Ruby'); 父主题: 集群性能