检测到您已登录华为云国际站账号,为了您更好的体验,建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
优化Elasticsearch和OpenSearch集群写入性能 CSS服务中的Elasticsearch和OpenSearch集群在使用前,建议参考本文进行集群的写入性能优化,便于提高集群的写入性能,提升使用效率。 数据写入流程 图1 数据写入流程 如图1所示,以Elasticsearch集群为
点加入到集群后,再依次将其余节点进行替换。当集群的数据量很大时,升级耗时将依赖数据迁移耗时。 升级流程 进行升级前检查:升级前检查 升级前检查大部分支持系统检查,少部分需要人工检查。 创建快照备份全量索引数据:手动创建快照 升级配置中支持选择进行全量索引快照备份检测,避免升级失败数据丢失。
要替换的节点。 单击“提交申请”。在数据迁移弹窗中确认是否进行数据迁移(建议勾选“进行数据迁移”避免数据丢失),单击“确认”提交申请。 数据迁移过程中,系统会把待替换节点中的所有数据分片移动到剩余节点,待数据迁移完成后再进行节点替换操作。当待替换节点上的数据在剩余节点存在副本时,
要替换的节点。 单击“提交申请”。在数据迁移弹窗中确认是否进行数据迁移(建议勾选“进行数据迁移”避免数据丢失),单击“确认”提交申请。 数据迁移过程中,系统会把待替换节点中的所有数据分片移动到剩余节点,待数据迁移完成后再进行节点替换操作。当待替换节点上的数据在剩余节点存在副本时,
管道参数说明 参数 说明 pipeline.workers 并行执行管道的Filters和Outputs阶段的工作线程数。 取值范围:1~20 默认值:CPU核数 pipeline.batch.size 单个工作线程在尝试执行其Filters和Outputs之前将从inputs收集的
或IAM用户是否具有备份索引的权限,具体操作请参见排查是否有权限。 排查是否有权限 登录统一身份认证服务管理控制台。 查看当前登录所用的账号或IAM用户所属的用户组。 具体操作请参见《统一身份认证服务用户指南》中的如何查看或修改用户信息章节。 查看用户组的权限中是否包含:“全局服务”中“对象存储服务”项目的“OBS
API导入数据。 步骤3:搜索数据:在Elasticsearch集群中对数据进行全文检索和聚合结果显示。 步骤4:删除索引:当不再使用对应的索引数据时,可以删除对应索引节约资源。 准备工作 已注册华为账号并开通华为云,进行了实名认证,且在使用云搜索服务前检查账号状态,账号不能处于欠费或冻结状态。
API导入数据。 步骤3:搜索数据:在OpenSearch集群中对数据进行全文检索和聚合结果显示。 步骤4:删除索引:当不再使用对应的索引数据时,可以删除对应索引节约资源。 准备工作 已注册华为账号并开通华为云,进行了实名认证,且在使用云搜索服务前检查账号状态,账号不能处于欠费或冻结状态。
费模式。 在“按需转包年/包月”页面,根据需求配置“订购周期”以及是否“自动续费”。 单击“去支付”,在购买云搜索服务集群进行确认后,单击“确认支付”。 返回集群管理页面,在“计费模式”列可以查看当前的计费模式是否转成功。 父主题: 变更计费模式
问题现象 Spring Boot服务使用Elasticsearch RestHighLevelClient链接Elasticsearch运行一段时间就会出现Connection reset by peer,TCP连接中断,业务数据写入失败。 原因分析 连接关闭有很多原因,是Ela
法分配新索引分片并影响集群性能。 检测集群数据节点/冷数据节点的存储用量是否均衡,不均衡的存储用量分布可能导致集群负载不均,读写延迟增加。 连续5分钟检测当前集群是否有节点脱离或不可用。 检测节点分片数量是否过多,单节点分片数量过多会消耗大量节点资源,读写请求时延增加,集群元数据更新缓慢等。
费模式。 在“按需转包年/包月”页面,根据需求配置“订购周期”以及是否“自动续费”。 单击“去支付”,在购买云搜索服务集群进行确认后,单击“确认支付”。 返回集群管理页面,在“计费模式”列可以查看当前的计费模式是否转成功。 父主题: 计费相关
法分配新索引分片并影响集群性能。 检测集群数据节点/冷数据节点的存储用量是否均衡,不均衡的存储用量分布可能导致集群负载不均,读写延迟增加。 连续5分钟检测当前集群是否有节点脱离或不可用。 检测节点分片数量是否过多,单节点分片数量过多会消耗大量节点资源,读写请求时延增加,集群元数据更新缓慢等。
一。 备份与恢复索引 为避免数据丢失,您可以将集群的索引数据进行备份,当数据发生丢失或者想找回某一时间段数据时,您可以通过恢复索引操作快速获得数据。索引的备份是通过创建集群快照实现。第一次备份时,建议将所有索引数据进行备份。 备份与恢复索引 VPC服务介绍【视频】 发布区域:华北
High level Client)方式连接集群,Rest Client客户端对Elasticsearch的API进行了封装,用户只需要构造对应的结构即可对ES集群进行访问。Rest Client的详细使用请参考官方文档:https://www.elastic.co/guide/e
略相同执行频次的自动快照。 frequency 否 String 自动创建快照的执行频次。 说明: 默认值DAY,取值HOUR时,表示每小时整点执行一次;取值DAY时,表示每天执行一次;取值SUN、MON、TUE、WED、THU、FRI、SAT时,表示在每周对应时间执行一次。比如
指定节点类型缩容 功能介绍 该接口用于集群对不同类型实例的个数以及存储容量进行缩容。包周期类型的集群不支持通过api进行指定节点类型缩容操作。 在缩容前,建议备份所有关键数据,以免造成数据丢失。 调用方法 请参见如何调用API。 URI POST /v1.0/extend/{pr
指定节点缩容 功能介绍 该接口可以对集群现有节点中指定节点进行缩容。包周期类型的集群不支持通过api进行指定节点缩容操作。 在缩容前,建议备份所有关键数据,以免造成数据丢失。 调用方法 请参见如何调用API。 URI POST /v1.0/{project_id}/cluster
仅启用了冷数据节点的集群才支持进行冷热数据切换。只有在创建集群时可以选择启用冷数据节点,已建集群不支持添加冷数据节点。 切换冷热数据 登录云搜索服务管理控制台。 确认集群是否已启用冷数据节点。 在“集群管理”页面,选择需要进行存算分离的集群,单击集群名称进入集群详情页,查看“节点信息”中是否有冷数据节点的信息。
仅启用了冷数据节点的集群才支持进行冷热数据切换。只有在创建集群时可以选择启用冷数据节点,已建集群不支持添加冷数据节点。 切换冷热数据 登录云搜索服务管理控制台。 确认集群是否已启用冷数据节点。 在“集群管理”页面,选择需要进行存算分离的集群,单击集群名称进入集群详情页,查看“节点信息”中是否有冷数据节点的信息。