检测到您已登录华为云国际站账号，为了您更好的体验，建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
检测到您已登录华为云国际站账号，为了您更好的体验，建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
增强Elasticsearch集群数据导入性能 特性介绍 数据导入性能增强为云搜索服务自主研发的特性，通过优化Bulk路由、文本索引加速、分词加速等方式，有效提升导入性能以及降低写入拒绝的情况。适用于索引分片较多、文本索引量大、导入吞吐量高的场景。 表1 数据导入性能优化方式 优化方式
rejected_concurrent HTTP流控开启生效，关闭后不清零，开启流控期间拒绝的并发连接数。 rejected_new HTTP流控开启生效，关闭后不清零，开启流控期间拒绝的新建连接数。 rejected_deny HTTP流控开启生效，关闭后不清零，配置黑名单拒绝的请求数。 memory_allow
自动滚动索引。 本案例通过配置生命周期策略，当索引的大小达到1TB或索引创建超过1天时，自动滚动生成新索引；当索引创建7天后，关闭数据副本；当索引创建30天后，删除该索引。 假设某个索引，其每天约产生2.4TB的数据，索引别名“log-alias”，其数据在Elasticsear
cache.circuit_breaker.cpu.limit": "75%" } } 如果需要返回的字段较少，且均为keyword或者数值类型字段，可以通过docvalue_fields配置召回需要的字段，有效降低fetch阶段的开销。 POST my_index/_search {
2、Elasticsearch 7.10.2集群支持大查询隔离。 配置大查询隔离 大查询隔离特性和全局超时特性默认关闭，用户可根据需要实时配置，配置后立即生效。 登录云搜索服务管理控制台。 在“集群管理”页面，选择待配置大查询隔离的集群，单击操作列“Kibana”，登录Kibana界面。 在Kibana的左侧导航中选择“Dev
title为text（含keyword）类型，需要使用“title.keyword”进行聚合，默认情况下Elasticsearch和OpenSearch无法直接对text类型的字段进行聚合。其中titles仅为聚合的命名，可以根据需要命名为titles或者titleaggs等。 GET
ive Only”避免数字重置后出现负数。 当需要区分不同索引的情况时，则将“Group by”设置为“Terms”，“By”设置为“index_stats.index”，最终得到的聚合结果将按照索引名称区分。 当需要查看不同时间段的数据时，则需要将时间聚合间隔设置好，否则将导致数据显示不完整。在“Panel
自动滚动索引。 本案例通过配置生命周期策略，当索引的大小达到1TB或索引创建超过1天时，自动滚动生成新索引；当索引创建7天后，关闭数据副本；当索引创建30天后，删除该索引。 假设某个索引，其每天约产生2.4TB的数据，索引别名“log-alias”，其数据在Elasticsear
本案例通过给Elasticsearch 7.10.2版本的集群配置生命周期策略，实现索引在创建3天后，自动被冻结，数据转储到OBS中；当索引创建6天后，关闭索引；当索引创建7天后，对存储在OBS上的索引数据执行归档操作，进一步降低存储成本；当索引创建30天后，删除该索引。 图1 存算分离方案 约束限制 仅Elasticsearch
ScriptScore查询 写入向量数据后，针对向量字段可以使用ScriptScore进行最近邻查询，查询语法如下所示。 前置过滤条件可以为任意查询，script_score仅针对前置过滤的结果进行遍历，计算向量相似度并排序返回。此种查询方式不使用向量索引算法，性能取决于前置过滤后中间结果集的大小，当
"SELECT * FROM my-index LIMIT 50" } 默认情况下，查询结果返回的是JSON格式的数据。当需要返回CSV格式的数据时，则需要在命令中对format参数进行如下设置： 1 2 3 4 POST _opendistro/_sql?format=csv {
ScriptScore查询 写入向量数据后，针对向量字段可以使用ScriptScore进行最近邻查询，查询语法如下所示。 前置过滤条件可以为任意查询，script_score仅针对前置过滤的结果进行遍历，计算向量相似度并排序返回。此种查询方式不使用向量索引算法，性能取决于前置过滤后中间结果集的大小，当
长按/截图保存，微信识别二维码
或者关注公众号“华为云”
