检测到您已登录华为云国际站账号，为了您更好的体验，建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
检测到您已登录华为云国际站账号，为了您更好的体验，建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
Elasticsearch集群最大堆内存持续过高（超过90%） 问题描述 关于Elasticsearch集群的最大堆内存持续超过90%的问题。其中如果节点在90%堆内存上下波动，有增有减，则无异常；持续高内存时，集群存在一定的风险。 原因分析 排查集群的写入和查询队列，查看是否有大量任务堆积。
CSS集群平均已用内存比例达到98%怎么办？ 问题现象 查看集群监控发现，Elasticsearch集群“平均已用内存比例”一直处于98%，用户担心内存比例过高是否对集群有影响。 问题原因 在Elasticsearch集群中，Elasticsearch会占用50%内存，另外50%内存会被Lu
进行聚合和排序时，会使用fielddata数据结构，会占用较大内存。 在Kibana执行如下命令，查询fielddata缓存情况。 GET /_cat/nodes?v&h=name,fielddataMemory 当fielddata占用内存过高时，可以执行如下命令清理指定索引的fielddata
collecting in the last [x.xs]”。 图1 频繁GC导致OOM 原因分析 集群负载过高，可能是有大量查询或写入任务堆积。当堆内存不足时，任务无法分配，将频繁触发GC，导致Elasticsearch进程异常退出。 处理步骤 如果集群长期处于高负载状态，则集群会存在写
配置Elasticsearch集群大查询隔离 场景描述 大查询隔离支持对查询请求进行独立管理，将高内存、长耗时的查询请求进行隔离，保证节点内存安全。在节点堆内存使用率过高时，触发中断控制程序，根据选择的中断策略将其中一条大查询请求进行中断，取消其正在运行的查询任务。大查询隔离同时
使用SQL语言在OpenSearch中搜索数据 在OpenSearch版本中提供Open Distro for Elasticsearch SQL插件允许您使用SQL而不是Elasticsearch查询域特定语言（DSL）编写查询。 熟悉SQL语言的用户，可以使用SQL语言在OpenSearch中搜索数据。
String 节点堆内存的阈值，限制节点全局堆内存的使用率，超过此值将进行流量反压。 取值范围：10%-100% 默认值：90% 说明： 默认值90%是一个比较保守的阈值，即堆内存大于90%使用量时会停止读取客户端超过64KB的大请求，直至堆内存下降。如堆内存下降到85%，会开始
使用SQL语言在Elasticsearch中搜索数据 在Elasticsearch集群 6.5.4及之后版本中提供Open Distro for Elasticsearch SQL插件允许您使用SQL而不是Elasticsearch查询域特定语言（DSL）编写查询。 熟悉SQL语言
CSS服务中单节点的使用率过高是否会影响集群的业务？ 问题现象 查看集群监控发现，Elasticsearch集群“磁盘使用率”达到80%以上，用户担心单节点使用率过高会对集群业务产生影响。 业务影响 单节点使用率超过85%：会导致新的分片无法分配。 单节点使用率超过90%：Ela
CSS集群冻结索引后如何查询OBS上的索引占用量？ CSS集群冻结到OBS上的索引大小和未冻结时的索引大小是一样的，通过查询已冻结的索引信息就可以获取OBS上所有索引的大小信息，而所有索引的大小之和就是OBS上索引的占用量。 执行如下命令获取正在冻结过程中或者已经冻结完成的所有索引。
制对这些堆外内存进行管理。上述API能够查询当前堆外内存使用量、缓存命中次数、加载次数等信息。 预加载向量索引 PUT /_vector/warmup/{index_name} 使用上述接口能将指定index_name的向量索引预加载至堆外内存供查询使用。 清除缓存 PUT /_vector/clear/cache
制对这些堆外内存进行管理。上述API能够查询当前堆外内存使用量、缓存命中次数、加载次数等信息。 预加载向量索引 PUT /_vector/warmup/{index_name} 使用上述接口能将指定index_name的向量索引预加载至堆外内存供查询使用。 清除缓存 PUT /_vector/clear/cache
开启HTTP/HTTPS节点流控 内存流控 基于节点堆内存使用量限制请求Path，支持设置内存流控白名单、全局内存使用阈值和基于单个Path设置堆内存使用阈值。全局内存流控阈值优先于单个Path内存阈值，白名单配置Path不参与内存流控。 开启内存流控 Path全局免流控白名单 可
Elasticsearch”，进入集群列表页面。 找到load飙升的集群，单击集群操作列的“Cerebro”进入可视化页面。 查看cpu和heap指标，如果这两个指标过高则说明集群当前压力较大，客户端可以适当减少大请求发送，等待集群压力下降。 查看shards是否合理，官方建议单个shard大小为20-40
TTPS并发连接数限制、HTTP最大连接数限制，基于节点内存的客户端写入流量反压控制，一键断流能力。同时也提供节点访问IP统计和URL的统计能力。开启客户端写入流量反压控制功能，会在节点堆内存过大时阻止大请求涌入节点占用内存，避免节点崩溃，减少节点不可用的风险。 说明： 2023
0）的Kibana导出数据需要依赖SQL Workbench插件。 在Kibana的“SQL Workbench”里，输入Elasticsearch SQL语句可以查询数据，也可以“Download”导出数据，支持自定义导出1~200条数据，缺省导出200条数据。 Elasticsearch SQL语句请参见查询Elasticsearch
CSS集群监控与运维 CSS集群平均已用内存比例达到98%怎么办？ CSS服务中如何查看集群总磁盘使用率？ CSS服务中单节点的使用率过高是否会影响集群的业务？
Rest Client）时，报出I/O Reactor STOPPED Elasticsearch集群最大堆内存持续过高（超过90%） Elasticsearch集群更改规格失败 安全集群索引只读状态修改报错 Elasticsearch集群某一节点分配不到shard 集群索引插入数据失败
集群创建分片的速度随着集群分片数量增多而逐渐减低。 触发Elasticsearch自动创建index时，创建速度变慢会导致大量写入请求堆积在内存中，严重时可导致集群崩溃。 分片过多时，如果不能及时掌控业务的变化，可能经常遇到单分片记录超限、写入拒绝等问题。 父主题： CSS集群搜索引擎使用
与索引类型、总堆外内存大小等因素相关。通过预估全量索引所需的堆外内存大小，可以选择合适的集群规格。由于向量索引内存占用较高，CSS对于内存规格为8GB及以下的集群默认禁用了向量检索插件。 不同类型的索引所需堆外内存大小的预估方式不同，计算公式如下： GRAPH类索引 mem_needs
长按/截图保存，微信识别二维码
或者关注公众号“华为云”
