检测到您已登录华为云国际站账号,为了您更好的体验,建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
系统调优 进行操作系统级以及数据库系统级的调优,更充分地利用机器的CPU、内存、I/O和网络资源,避免资源冲突,提升整个系统查询的吞吐量。
网络连接超时异常/当前主机业务压力大,调整当前网络环境/调整业务压力。2. 主机异常关闭,检查主机异常关闭原因。"
比较操作符 模式匹配操作符 聚集函数 窗口函数 类型转换函数 JSON/JSONB函数和操作符 安全函数 条件表达式函数 范围函数和操作符 数据脱敏函数 Roaring Bitmap函数和操作符 UUID函数 文本检索函数和操作符 HLL函数和操作符 集合返回函数 几何函数和操作符 网络地址函数和操作符
8.2.1及以上集群版本支持降级异常规则,所有异常规则都支持降级行为,降级后仅网络资源抢占降至低优先级,即在正常查询无网络请求时,才会调度降级查询的网络请求。 关联、解绑异常规则仅8.2.0及以上集群版本支持。
端到端数据分析流程 数据仓库服务与华为云平台其他一系列服务已无缝集成,以便用户能够快速部署端到端的数据分析和解决方案。 端到端数据分析流程如下图所示,该流程展示了每个过程可以使用的云服务。 图2 端到端数据分析流程
net_send_time bigint 网络时间,包含CN向客户端发送数据、DN向CN发送数据等时间,单位为微秒。 data_io_time bigint IO时间,文件IO耗时,单位为微秒。
NET_SEND_TIME:网络上的时间花销。 DATA_IO_TIME:IO时间上的花销。 表1 PV_INSTANCE_TIME字段 名称 类型 描述 stat_id integer 类型编号。 stat_name text 运行时间类型名称。
NET_SEND_TIME:网络上的时间花销。 DATA_IO_TIME:IO时间上的花销。 表1 PV_INSTANCE_TIME字段 名称 类型 描述 stat_id integer 类型编号。 stat_name text 运行时间类型名称。
安全组规则若不删除,DWS集群中的节点与MRS集群中的节点网络仍是互通的。如果用户对网络安全要求较严格,建议手动删除安全组规则。 父主题: 管理MRS数据源
- 单击“下一步:网络配置”。 配置网络。 表2 网络参数说明 参数名 参数解释 样例值 虚拟私有云 指定集群节点使用的虚拟专用网络,实现不同业务的网络隔离。
此方式网络传输数据量较大,因此当网络传输节点(Stream)实际数据量较大而估算不准时,可以将该参数设置为off,看性能是否有提升。 rewrite_rule 控制优化器是否启用特定组合的重写规则。 父主题: SQL调优进阶
结合报表分析业务的负载调研、日常监控和测试验证,50并发以内的复杂报表SQL不会引起服务器资源争抢,不会引起业务系统卡慢,配置报表用户可使用20%的CPU资源。
net_send_time bigint 网络时间,包含CN向客户端发送数据、DN向CN发送数据等时间(单位:微秒)。 data_io_time bigint IO时间,文件IO耗时(单位:微秒)。
" "dws:dmsGrpcOuter:operation" 支持: 项目(Project) 企业项目(Enterprise Project) 修改DMS监控采集配置 "dws:dmsCollectConfig:modify" "dws:dmsGrpcOuter:operation
为了更好的网络性能,选择安全组时不要多于5个。 父主题: 产品咨询
图2 数据仓库配置 单击“下一步:网络配置”。 参见表4进行网络配置。 表4 网络配置 参数 示例 说明 虚拟私有云 vpc-default GaussDB(DWS)所在的虚拟私有云网络。 子网 subnet-default(192.168.0.0/24) 虚拟私有云的子网。
send_speed text 资源池在所有DN上网络发送速率的平均值,显示结果已使用pg_size_pretty格式化。 recv_speed text 资源池在所有DN上网络接收速率的平均值,显示结果已使用pg_size_pretty格式化。 父主题: 系统视图
集群使用子网实现与其他网络的隔离,并独享所有网络资源,以提高网络安全。 - 安全组 指定虚拟私有云的安全组。 安全组限制安全访问规则,加强集群与其它服务间的安全访问。 - 公网访问 指定用户是否可以在互联网上使用客户端连接集群数据库。
有以下两个操作: 由辅助线程监控内存占用,如果整体内存占用到80%时,清理1/4的stream线程,并判断syscache占用是否超过总占用内存的30%,如果大于30%,则清理大于64MB的Readcommand阶段pg线程的syscache。
尽量避免数据shuffle,减小网络压力。通过选择join-condition或者group by列为分布列可以最大程度的实现这点。 从上述描述来看表定义中最重要的一点是分布列的选择。创建表定义一般遵循图1所示流程。表定义在数据库设计阶段创建,在SQL调优过程中进行审视和修改。