检测到您已登录华为云国际站账号,为了您更好的体验,建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
int 资源池引用作业数,作业经过资源池不管是否管控都会计数,仅CN上有效。 fast_run int 资源池快车道运行作业数,只在CN上有效。 fast_wait int 资源池快车道排队作业数,只在CN上有效。 fast_limit int 资源池快车道作业并发限制,只在CN上有效。
int 资源池引用作业数,作业经过资源池不管是否管控都会计数,仅CN上有效。 fast_run int 资源池快车道运行作业数,只在CN上有效。 fast_wait int 资源池快车道排队作业数,只在CN上有效。 fast_limit int 资源池快车道作业并发限制,只在CN上有效。
系统表和系统视图概述 系统表是GaussDB(DWS)存放结构元数据,是GaussDB(DWS)数据库系统运行控制信息的来源,也是数据库系统的核心组成部分。系统表包含集群安装信息以及GaussDB(DWS)上运行的各种查询和进程的信息。可以通过查询系统表来收集有关数据库的信息。
JOBS系统表的描述详见PG_JOBS。 表1 PG_JOB_PROC字段 名字 类型 描述 job_id bigint 作业ID。 what text 作业内容。 父主题: 系统视图
GaussDB(DWS) SQL编写规则 DDL 【建议】在GaussDB(DWS)中,建议DDL(建表、comments等)操作统一执行,在批处理作业中尽量避免DDL操作。避免大量并发事务对性能的影响。 【建议】在非日志表(unlogged table)使用完后,立即执行数据清理(TRU
专属限额其实就是绑核,按照百分比的方式分配CPU核给资源池使用,该资源池上运行的复杂作业只能在分配的CPU上运行。 共享配额相当于给资源池按照百分比配置一定的权重,配额不限制资源池使用的CPU核,当一个CPU满负载时,在该CPU上运行作业的资源池按照权重的比例抢占CPU时间片。 可利用专属限额限制语句
dws_customer_360.t_user_resource; 原因分析 存在部分SQL语句使用内存资源过多,造成内存资源耗尽,其余语句执行作业时无法分配到内存就提示内存不足。 处理方法 调整业务执行时间窗,与高并发执行业务的时间错峰执行。 查询当前集群的内存使用情况,找到内存使用
此数值大小,使得系统支持最大限度的并发作业,且防止并发执行作业过多,引起系统崩溃。 parctl_min_cost(局部并发队列) 控制在一个CN上同一资源池内的并发作业数量。 局部并发控制机制根据执行作业的cost,控制复杂查询的并发作业数量。 全局并发队列参数max_active_statements调整需注意:
max_active_statements:设置全局的最大并发数量。此参数只应用到CN,且针对一个CN上的执行作业。默认值60,最多允许60个作业同时运行,其余作业将会排队。 选择增加CN还是扩容集群 连接数不足:初次创建集群时,集群默认的CN节点数是3,能基本满足客户的连接需
此数值大小,使得系统支持最大限度的并发作业,且防止并发执行作业过多,引起系统崩溃。 parctl_min_cost(局部并发队列) 控制在一个CN上同一资源池内的并发作业数量。 局部并发控制机制根据执行作业的cost,控制复杂查询的并发作业数量。 全局并发队列参数max_active_statements调整需注意:
max_topsql_memory:TopSQL记录历史作业监控信息允许使用的最大内存。 topsql_used_memory:TopSQL记录历史作业监控信息已使用的内存大小。 topsql_peak_memory:TopSQL记录历史作业监控信息的内存峰值。 other_used_memory:其他已使用的内存大小。
max_topsql_memory:TopSQL记录历史作业监控信息允许使用的最大内存。 topsql_used_memory:TopSQL记录历史作业监控信息已使用的内存大小。 topsql_peak_memory:TopSQL记录历史作业监控信息的内存峰值。 other_used_memory:其他已使用的内存大小。
参数说明:设置全局的最大并发数量。此参数只应用到CN,且针对一个CN上的执行作业。 数据库管理员需根据系统资源(如CPU资源、IO资源和内存资源)情况,调整此数值大小,使得系统支持最大限度的并发作业,且防止并发执行作业过多,引起系统崩溃。 参数类型:SIGHUP 取值范围:整型,-1 ~
集群管理 为两种作业绑定不同资源池以实现GaussDB(DWS)资源负载能力 GaussDB(DWS)存算一体架构弹性伸缩系统性介绍
waiting in respool queue:表示语句在资源池排队中,简单作业并发受限,主要是简单作业并发超过快车道并发上限max_dop。 waiting in ccn queue:表示作业在CCN排队中,包含全局内存排队和慢车道内存和并发排队,包含以下场景: 全局可用内存超过上限,进行全局内存队列排队。
ws-client、dws-connector-flink、dws-flink-ingestion组件,入库相关均使用dws-client作业底层入库组件,版本统一使用dws-client版本号; 当前版本分为1.x和2.x版本,1.x版本将不再引入新的功能,仅对已有功能加固;2
不负责基于GaussDB(DWS)集群之上的客户业务应用开发问题答疑和处理,例如业务设计、代码开发、作业性能调优和业务迁移等。如需支持,可咨询购买对应专家服务。 在GaussDB(DWS)集群组件服务无明显异常或明确产品质量缺陷的情况下,不负责作业运行异常问题的排查分析。 数据仓库专家服务 如需获得更多支持,可咨
waiting in respool queue:表示语句在资源池排队中,简单作业并发受限,主要是简单作业并发超过快车道并发上限max_dop。 waiting in ccn queue:表示作业在CCN排队中,包含全局内存排队和慢车道内存和并发排队,包含以下场景: 全局可用内存超过上限,进行全局内存队列排队。
这些查询会添加到“SQL终端”页签中光标所在位置。 如果作业出错时仍继续执行,则终端中的每条语句将作为定时任务依次运行。系统会在控制台上更新执行状态,在进度条中显示作业。当作业执行、进度条更新和控制台更新之间的时间差变得非常细微,则用户无法打开进度条去停止作业执行。此时,必须关闭SQL终端才能停止执行。
“查杀阻塞作业”:如果用户选择“在线扩容”,则支持设置查杀阻塞作业。 “查杀阻塞作业等待时间(秒)”:查杀阻塞作业开启后,在线扩容过程中如果遇到阻塞情况,将在设置的查杀阻塞作业等待时间结束后,查杀阻塞扩容的后台作业,取值范围30~1200的整数。 查杀阻塞作业仅8.2.1.100及以上集群版本支持。