检测到您已登录华为云国际站账号,为了您更好的体验,建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
节点机型适用场景 节点机型 磁盘类型 规格说明 适用场景 计算密集型 云盘 CPU:内存=1:2 推荐场景,用于数据量较少(单节点<100GB)的搜索场景。 通用计算型 云盘 CPU:内存=1:4 通用场景,用于单节点数据量在100-1000GB间的搜索与分析场景,例如中等规模的电商搜索、社交搜索、日志搜索等场景。
数据导入导出类 Elasticsearch显示CPU使用率高,导致日志无法写入 ECS服务器部署Logstash推送数据到CSS服务报错 ES-Hadoop导数据时报"Could not write all entries"异常
节点机型适用场景 节点机型 磁盘类型 规格说明 适用场景 计算密集型 云盘 CPU:内存=1:2 推荐场景,用于数据量较少(单节点<100GB)的搜索场景。 通用计算型 云盘 CPU:内存=1:4 通用场景,用于单节点数据量在100-1000GB间的搜索与分析场景,例如中等规模的电商搜索、社交搜索、日志搜索等场景。
当堆内存不足时,任务无法分配,将频繁触发GC,导致Elasticsearch进程异常退出。 处理步骤 如果集群长期处于高负载状态,则集群会存在写入、查询缓慢等情形,建议根据业务需要升级节点规格或者对集群节点的数量和存储容量进行扩容,使集群更好的满足业务需求。升级节点规格、扩容节
62.179.33:9200”。 登录即将接入集群的弹性云服务器ECS。 弹性云服务器的使用指导请参见快速购买和使用Linux ECS。 将JSON数据文件上传至ECS。 例如,将如下数据保存为json格式的文件,上传到ECS。 Elasticsearch版本<7.x的数据 {"index":
ts阶段的工作线程数。 取值范围:1~20 默认值:CPU核数 pipeline.batch.size 单个工作线程在尝试执行其Filters和Outputs之前将从inputs收集的最大事件数,该值较大通常更有效,但会增加内存开销。 默认值:125 pipeline.batch
EsflavorsVersionsFlavorsResp 参数 参数类型 描述 cpu Integer 参数解释: 实例的CPU核数。 ram Integer 参数解释: 实例的内存大小。单位GB。 name String 参数解释: 规格名称。 region String 参数解释: 可用region。
通过Python客户端接入Elasticsearch集群 本文介绍通过Python语言访问CSS集群的配置说明。 准备工作 CSS集群处于可用状态。 确保运行Python代码的服务器与CSS集群的网络是互通的。 接入集群 安装Elasticsearch Python客户端,建议和Elasticsearch的版本保持一致,例如需要访问的集群版本是7
务的OpenSearch集群。 操作步骤 创建一个弹性云服务器ECS。 ECS需要和CSS服务的集群在同一个虚拟私有云中。 ECS选择的安全组需要开放5601端口。 ECS需要绑定弹性公网IP。 操作指导请参见弹性云服务器ECS使用指南。 获取CSS服务的OpenSearch集群的访问地址。
手动创建快照再变更规格。 选择目标集群,单击操作列的“更多>形态变更”进入形态变更页面。 选择“更改集群规格”页签。 在更改集群规格页面,设置变更规格的参数。 表2 变更规格 参数 说明 变更类型 选择“变更规格”。 变更的资源 显示本次变更规格的资源变化量。 变更的角色 先在“
升级Elasticsearch集群版本 Elasticsearch集群的版本升级功能支持同版本升级、跨版本升级和跨引擎升级。 场景描述 升级场景 同版本升级是升级集群的内核补丁。集群升级至当前版本的最新镜像,用于修复问题或优化性能。 跨版本升级是升级集群的版本。集群升级至目标版本的最新镜像,用于功能加强或版本收编。
memory.task.limit String 查询任务用于聚合等操作向节点申请的大内存,申请内存超过此阈值将进行隔离观察。 取值范围:0b~节点最大堆内存 默认值:50MB 说明: 可以通过如下命令查询集群堆内存使用情况和最大值。 GET _cat/nodes?&h=id,ip,port
lasticsearch集群。 操作步骤 创建一个弹性云服务器ECS。 ECS需要和CSS服务的集群在同一个虚拟私有云中。 ECS选择的安全组需要开放5601端口。 ECS需要绑定弹性公网IP。 操作指导请参见弹性云服务器ECS使用指南。 获取CSS服务的Elasticsearch集群的访问地址。
≥ 0 max_cpu_usage 最大CPU利用率 CSS集群中各个节点的CPU利用率的最大值。 单位:百分比 0-100% max_load_average 最大节点Load值 CSS集群中各个节点在操作系统中1分钟平均排队任务数的最大值。 ≥ 0 avg_cpu_usage 平均CPU使用率
手动创建快照再变更规格。 选择目标集群,单击操作列的“更多>形态变更”进入形态变更页面。 选择“更改集群规格”页签。 在更改集群规格页面,设置变更规格的参数。 表2 变更规格 参数 说明 变更类型 选择“变更规格”。 变更的资源 显示本次变更规格的资源变化量。 变更的角色 先在“
CSS集群备份与恢复 CSS服务中如何查询集群的快照信息? CSS服务中集群被删除后是否还能恢复?
Dashboards(推荐方式) 图形化操作与展示。 监控实例。 管理数据。 不限制访问语言。 通过OpenSearch Dashboards登录OpenSearch集群 Cerebro 通过Cerebro登录OpenSearch集群 开源Elasticsearch API 通过Curl命令访问与管理OpenSearch集群。
Kibana(推荐方式) 图形化操作与展示。 监控实例。 管理数据。 不限制访问语言。 通过Kibana登录Elasticsearch集群 Cerebro 通过Cerebro登录Elasticsearch集群 开源Elasticsearch API 通过Curl命令访问与管理Elasticsearch集群。
左侧导航栏,选择“集群管理 > Elasticsearch”,进入集群列表页面。 找到load飙升的集群,单击集群操作列的“Cerebro”进入可视化页面。 查看cpu和heap指标,如果这两个指标过高则说明集群当前压力较大,客户端可以适当减少大请求发送,等待集群压力下降。 查看shards是否合理,官方
circuit_breaker.enabled 是否开启堆外内存熔断。 默认值:true。 native.cache.circuit_breaker.cpu.limit 向量索引堆外内存使用上限。 假设使用128GB内存的机器且堆内存大小为31GB,默认堆外内存使用上限为(128 - 31) * 45%