检测到您已登录华为云国际站账号，为了您更好的体验，建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
检测到您已登录华为云国际站账号，为了您更好的体验，建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
下载性能测试使用的开源压测工具Wrk，获取地址https://github.com/wg/wrk/tree/master。 性能测试的操作步骤 创建一个弹性云服务器ECS，用于安装压测工具和执行测试脚本。操作指导请参见快速购买和使用Linux ECS。
节点规格为ess.spec-4u16g、节点数为3的集群性能测试结果如下。
通过控制台访问OpenSearch Dashboards登录OpenSearch集群 公网地址访问OpenSearch Dashboards 仅安全模式的集群支持通过Kibana公网访问地址访问OpenSearch Dashboards。
CSS创建索引报错maximum shards open 问题描述 创建索引时，报错显示“this action would add [2] total shards, but this cluster currently has [1000]/[1000] maximum shards
Elasticsearch集群报错：unassigned shards all indices 问题描述 Elasticsearch集群报错unassigned shards all indices，集群状态为red。 原因分析 当前集群存在未分配的shard。
前提条件 已准备好存有数据的MySQL数据库，本案例以云数据库的RDS for MySQL实例为例，具体操作请参见购买RDS for MySQL实例。 已准备好用于同步数据的Logstash集群，具体操作请参见xxx。本文以7.10.0版本的Logstash集群为例。
详细请参考security-dashboards-plugin。
原因分析 新建索引分片被集中分配于一个node节点上可能有以下原因： 之前索引的分配导致某个节点上的shards数量过少，新建索引shards分配被balance.shard参数主导，为了平衡所有索引的全部分片，将shards集中分配在数量过少的节点上。
升级Elasticsearch集群版本 数据库数据迁移至Elasticsearch集群 数据复制服务DRS 适用于将MySQL数据库中的数据同步到Elasticsearch集群中。一般用于集群间的数据增量迁移，在数据同步后集群随时可割接，较其他增量迁移更加方便灵活。
优化向量检索写入与查询性能 写入性能优化 关闭副本，待数据导入完成后再开启副本，减少副本构建的开销。 调整“refresh_interval”为120s或者更大，避免频繁刷新索引生成大量小的segments，同时减少merge带来的向量索引构建开销。 适当调大“native.vector.index_threads
“cluster.routing.allocation.total_shards_per_node”是集群级别的分片限制。 “index.routing.allocation.total_shards_per_node”是索引级别的分片限制。
性能测试对比 测试环境 数据集： esrally nyc_taxis数据集 集群规格： 4U16G 100GB高IO * 3节点 测试步骤 在集群中创建索引模板，指定排序键和关闭聚合增强。
在OpenSearch Dashboards上使用开源OpenSearch API导入数据 在OpenSearch Dashboards上支持通过POST命令使用开源OpenSearch API导入单条数据。 登录云搜索服务管理控制台。
表2 使用DRS从数据库导入数据至Elasticsearch 数据导入场景 源数据库 目标Elasticsearch集群 参考文档 将RDS for MySQL数据库的数据导入到CSS Elasticsearch集群 RDS for MySQL 5.5、5.6、5.7、8.0版本
请求示例 查询前10个日志备份任务列表 GET /v1.0/{project_id}/clusters/{cluster_id}/logs/records 响应示例 状态码： 200 请求已成功。
在Kibana/OpenSearch Dashboards查询 登录云搜索服务控制台。 在集群管理列表，选择需要查看插件的集群，单击操作列的“Kibana”登录Kibana或OpenSearch Dashboards界面。
为避免这类问题，可以通过设置索引级别的参数“routing.allocation.total_shards_per_node”控制索引分片在各节点的分布情况。此参数可以在索引模板中配置，也可以修改已有索引的setting生效。
curl "$p:$port/_cat/shards?
表2 使用DRS从数据库导入数据至OpenSearch 数据导入场景 源数据库 目标OpenSearch集群 参考文档 将RDS for MySQL数据库的数据导入到CSS Elasticsearch集群 RDS for MySQL 5.5、5.6、5.7、8.0版本 OpenSearch
routing_factor = num_routing_shards / num_primary_shards shard_num = (hash(_routing) % num_routing_shards) / routing_factor 其中num_routing_shards
长按/截图保存，微信识别二维码
或者关注公众号“华为云”
