检测到您已登录华为云国际站账号,为了您更好的体验,建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
问题现象 查看集群监控发现,Elasticsearch集群“磁盘使用率”达到80%以上,用户担心单节点使用率过高会对集群业务产生影响。
Role mapping 角色映射:用户在成功进行身份验证后会担任角色。角色映射,就是将角色映射到用户(或后端角色)。例如,kibana_user(角色)到jdoe(用户)的映射意味着John Doe在获得kibana_user身份验证后获得了所有权限。
切换冷热数据和存算分离比,更适用于对搜索性能要求高的场景,冷数据存储在集群本地的冷数据节点中,存储的数据量大小依赖冷数据节点数和磁盘容量,存储成本也会比OBS高一些。 只要集群有冷数据节点就支持。
冻结索引后,索引会被转储到OBS中,同时本地磁盘中的索引数据会被删除。当查询被冻结的索引时,时延会增加,在聚合时,由于查询复杂、数据读取多,时延变长会更明显。 已转储到OBS中的索引不支持解冻,即不可回退为可写的索引。
磁盘使用率过高 返回结果如下,其中“allocate_explanation”表示该索引的分片无法分配给任何数据节点,“explanation”表示节点磁盘使用率已超过磁盘空间允许的最大值。 图11 explain查询结果 磁盘使用率超过85%:会导致新的分片无法分配。
磁盘增强型 本地盘 挂载HDD盘 适合日志场景,用于存储冷数据,对冷数据的数据查询性能要求低,并且数据需要更新的场景。 超高I/O型 (CPU架构为鲲鹏计算) 本地盘 挂载SSD盘 适用大型日志场景,用于存储热数据。
在Elasticsearch安全集群中配置LDAP用户权限和Elasticsearch权限的映射,实现集群用户的细粒度权限。 LDAP服务器的rolebase权限组需要和Elasticsearch集群中的role相对应,映射关系如图3所示。
导出配置文件 无 在配置文件列表,单击右上角的,可以批量导出配置文件到本地,便于本地备份。 删除配置文件 当配置文件有执行中的管道任务时,不支持删除。 在配置文件列表,单击操作列的“删除”,在弹窗中单击“确定”删除配置文件。 父主题: 配置Logstash迁移任务
图4 权限映射 重复5.e-5.g完成其他权限组的映射。 验证结果。 登录云搜索服务管理控制台。 在左侧导航栏选择“集群管理 > OpenSearch”,进入集群列表。
云搜索服务当前支持的监控指标为磁盘使用率和集群健康状态。用户通过磁盘使用率指标可以及时了解集群的磁盘使用情况。通过集群健康状态指标,用户可以了解集群的健康状态。详细请参考云监控服务用户指南。
* 节点存储 磁盘存储类型和存储大小。您可以根据具体的业务场景选择对应的磁盘类型,不同的磁盘类型收费标准不一样。
节点存储 磁盘类型。您可以根据具体的业务场景选择对应的磁盘类型,不同的磁盘类型收费标准不一样。 节点存储提供按需计费和包年包月2种计费方式。 云搜索服务提供了多种磁盘类型: 普通I/O 高I/O 超高I/O 带宽 带宽大小。
检测集群索引是否开启副本,未设置副本的索引在节点发生故障后可能导致索引不可用,本地盘集群未设置副本会有数据丢失的风险。 检测集群是否存在kibana索引冲突。 检测节点磁盘用量百分比,节点磁盘存储过大可能导致节点无法分配新索引分片并影响集群性能。
磁盘增强型 本地盘 挂载HDD盘 适合日志场景,用于存储冷数据,对冷数据的数据查询性能要求低,并且数据需要更新的场景。 超高I/O型 (CPU架构为鲲鹏计算) 本地盘 挂载SSD盘 适用大型日志场景,用于存储热数据。
检测集群索引是否开启副本,未设置副本的索引在节点发生故障后可能导致索引不可用,本地盘集群未设置副本会有数据丢失的风险。 检测集群是否存在kibana索引冲突。 检测节点磁盘用量百分比,节点磁盘存储过大可能导致节点无法分配新索引分片并影响集群性能。
本地磁盘不支持该操作。 400 CSS.5098 Invalid EIP binding type. EIP绑定类型不合法。 请根据接口参数描述,确认EIP绑定类型。 400 CSS.5106 Invalid instance type. 实例类型不合法。 请输入正确实例类型。
CSS服务中如何查看集群总磁盘使用率? CSS服务中单节点的使用率过高是否会影响集群的业务?
CSS服务的集群节点磁盘空间用于存放哪些文件? CSS服务使用的数据压缩算法是什么? CSS服务中Kibana是否支持导出数据功能?
执行如下命令进行端口映射,将发往跳转主机对外开放端口的请求转发到待导入数据的集群中。 ssh -g -L <跳转主机的本地端口:节点的内网访问地址和端口号> -N -f root@<跳转主机的私网IP地址> <跳转主机的本地端口>:为步骤1中的端口。
≥ 0 disk_read_bytes_rate 磁盘读带宽 CSS集群节点的磁盘每秒读出数据量。 ≥ 0 disk_write_bytes_rate 磁盘写带宽 CSS集群节点的磁盘每秒写入数据量。