检测到您已登录华为云国际站账号,为了您更好的体验,建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
被路由到接收该Bulk请求的数据节点的本地shard中,如果该节点不包含对应index的shard,则会进行随机路由到其他包含该索引shard节点上。该方案依赖客户端Bulk请求的随机打散和主shard的均衡分布。 Bulk聚合优化 通过指定配置项“index.aggr_perf
择和资源配置提供准确的参考依据,本文提供了基于开源数据集和开源压力测试工具的Elasticsearch向量检索的性能测试方案。 配置测试环境 创建Elasticsearch向量数据库。 参考创建Elasticsearch集群,创建Elasticsearch集群。 “节点数量”选择
据已成功迁移至目标集群后,直接删除源集群。暂停源集群的业务可以采用如下方式处理: 如果使用的集群版本支持流量控制功能,可以开启一键断流切断节点上除运维接口外的所有流量,拒绝所有请求。 如服务管理控制果使用的集群版本不支持流量控制功能,可以关闭所有业务索引的读写。例如所有业务索引以log开头,在Kibana的“Dev
扩大配额,具体请参见服务配额。 更详细的限制请参见具体API说明。 终端节点 终端节点(Endpoint)即调用API的请求地址,不同服务不同区域的终端节点不同,您可以从地区和终端节点中查询所有服务的终端节点。 基本概念 账号 用户注册时的账号,账号对其所拥有的资源及云服务具有完
https://{iam-endpoint}/v3/projects”,其中{iam-endpoint}为IAM的终端节点,可以参考终端节点获取,接口的认证鉴权请参见认证鉴权。 响应示例如下,例如CSS部署的区域为“xxx”,在响应消息体中搜索“name”为“xxx”,其对应的“projects”下的“id”即为项目ID。
所有集群都支持。 当选择“节点类型”快速重启时,所选类型的所有节点会一起重启。 当选择“节点名称”快速重启时,一次只能重启一个节点。 快速重启过程中,集群不可用。 快速重启 滚动重启 仅当集群的节点数量(含Master节点、Client节点和冷数据节点)大于等于3时,才支持滚动重启。
所有集群都支持。 当选择“节点类型”快速重启时,所选类型的所有节点会一起重启。 当选择“节点名称”快速重启时,一次只能重启一个节点。 快速重启过程中,集群不可用。 快速重启 滚动重启 仅当集群的节点数量(含Master节点、Client节点和冷数据节点)大于等于3时,才支持滚动重启。
配置Elasticsearch集群内核监控 场景描述 表1 集群内核监控介绍 集群内核监控增强 描述 支持的集群版本 相关文档 P99时延监控 开源Elasticsearch在监控search请求时仅提供了平均延迟指标,这不足以准确反映集群的实际搜索性能。为了改进这一点,CSS服
配置Elasticsearch集群聚合增强 场景描述 聚合增强在数据聚簇的情况下,利用向量化技术,批量处理数据,从而提升聚合性能,优化可观测性业务的聚合分析能力。 在大规模数据的集聚合分析场景下,耗时主要集中在对数据的分组聚合。 提升分组聚合能力依赖排序键和聚簇键。 排序键:数据按照排序键顺序存储。
在“编辑日志备份配置”弹窗中,完成参数配置。 弹窗中默认填写了云搜索服务自动为用户创建的“OBS桶”、“备份路径”和“IAM委托”,用于日志备份。支持用户参考表1修改默认值。 如果集群已经启用了日志备份功能,也可以单击“日志备份配置”右侧的编辑图标,在“编辑日志备份配置”窗口,参考表1更新日志备份的配置参数。
如果集群存在大量的任务堆积,则参考如下步骤优化集群。 在集群的“日志管理”页面查看节点日志,查看节点在OOM前是否存在大量慢查询日志记录,分析查询是否会对节点造成压力导致节点内存不足,如果存在则根据业务实际情况优化查询语句。 在集群的“日志管理”页面查看节点日志,查看节点日志是否有“Inflight circuit break”或“segment
、PaaS和SaaS类云服务内部的安全以及对租户定制配置进行安全有效的管理,包括但不限于虚拟网络、虚拟主机和访客虚拟机的操作系统,虚拟防火墙、API网关和高级安全服务,各项云服务,租户数据,以及身份账号和密钥管理等方面的安全配置。 《华为云安全白皮书》详细介绍华为云安全性的构建思
在“编辑日志备份配置”弹窗中,完成参数配置。 弹窗中默认填写了云搜索服务自动为用户创建的“OBS桶”、“备份路径”和“IAM委托”,用于日志备份。支持用户参考表1修改默认值。 如果集群已经启用了日志备份功能,也可以单击“日志备份配置”右侧的编辑图标,在“编辑日志备份配置”窗口,参考表1更新日志备份的配置参数。
获取实例规格列表 查询所有标签 查询指定集群的标签 添加指定集群标签 删除集群标签 批量添加或删除集群标签 指定节点缩容 指定节点类型规格变更 指定节点类型缩容 下载安全证书 节点替换 安全模式修改 添加独立master、client 集群内核升级 获取可升级的目标镜像ID 获取集群升级或切换AZ的详情信息
String 配置文件名称。 keep_alive 否 Boolean 热启动操作时,需要与集群已存在管道的 “是否保持常驻”值保持一致。 true: 开启保持常驻。 false: 关闭保持常驻。 开启“保持常驻”适用于需要长期运行的业务。开启“保持常驻”以后,将会在每个节点上面配置一
object 配置文件操作。 modify: 修改参数配置。 delete: 删除参数配置。 reset: 重置参数配置。 表4 UpdateYmlsReqEditModify 参数 是否必选 参数类型 描述 elasticsearch.yml 是 Object 参数配置列表。值为需要修改的json数据。
当自建Elasticsearch集群有多个实例节点时,重复执行1.c到1.e给其他节点安装S3插件和配置AK/SK。 AKSK添加完成,重启Elastiseach集群使配置生效。 重启完成后,执行如下命令查看S3插件是否安装成功。 curl http://x.x.x.x:9200/_cat/plugins
获取参数配置任务列表 功能介绍 该接口可获取集群参数配置的任务操作列表。 调用方法 请参见如何调用API。 URI GET /v1.0/{project_id}/clusters/{cluster_id}/ymls/joblists 表1 路径参数 参数 是否必选 参数类型 描述
String 指定创建配置文件的集群ID。 请求参数 表2 请求Body参数 参数 是否必选 参数类型 描述 name 是 String 配置文件名称。4~32个字符,只能包含数字、字母、中划线和下划线,且必须以字母开头。 confContent 是 String 配置文件内容。 setting
String 指定更新配置文件的集群ID。 请求参数 表2 请求Body参数 参数 是否必选 参数类型 描述 name 是 String 配置文件名称。4~32个字符,只能包含数字、字母、中划线和下划线,且必须以字母开头。 confContent 是 String 配置文件内容。 setting