检测到您已登录华为云国际站账号,为了您更好的体验,建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
Elasticsearch针对filebeat配置调优 问题现象 filebeat是性能非常出色的文件采集工具,绝大多数的业务日志可以很容易的在1秒内收集至elasticsearch内,但是个别日志量大的业务日志无法及时收集,按照官方的默认配置通常1核CPU分配给filebeat
集群出现load升高的可能原因如下: 查询请求命中的数据较多导致查询线程执行缓慢。 写入压力过大导致很多线程出现卡死现象。 排查步骤 方法1:Cerebro工具 登录云搜索服务管理控制台。 左侧导航栏,选择“集群管理 > Elasticsearch”,进入集群列表页面。 找到load飙升的集群,单击集群操作列的“Cerebro”进入可视化页面。
Logstash集群规划建议 规划集群可用区 为防止数据丢失,并确保在服务中断情况下能降低集群的停机时间,从而增强集群的高可用性,CSS服务支持跨可用区(即多可用区)部署。用户可以在同一个区域内选择两个不同的可用区进行集群部署。 在创建集群时,如果用户选择了两个可用区,CSS服务
扩缩容Logstash集群 扩容Logstash集群 缩容Logstash集群 父主题: 使用Logstash迁移数据
设置自动创建快照策略 功能介绍 该接口用于设置自动创建快照,默认一天创建一个快照。 调用方法 请参见如何调用API。 URI POST /v1.0/{project_id}/clusters/{cluster_id}/index_snapshot/policy 表1 路径参数 参数
删除自定义词库 功能介绍 该接口用于清空自定义词库(主词词库、停词词库、同义词词库)。 调用方法 请参见如何调用API。 URI DELETE /v1.0/{project_id}/clusters/{cluster_id}/thesaurus 表1 路径参数 参数 是否必选 参数类型
开启自动创建快照功能 功能介绍 该接口用于打开自动备份功能。 调用方法 请参见如何调用API。 URI POST /v2.0/{project_id}/clusters/{cluster_id}/snapshots/policy/open 表1 路径参数 参数 是否必选 参数类型
启动pipeline迁移数据 功能介绍 该接口用于启动pipeline迁移数据。 调用方法 请参见如何调用API。 URI POST /v1.0/{project_id}/clusters/{cluster_id}/lgsconf/start 表1 路径参数 参数 是否必选 参数类型
切换集群实例AZ 功能介绍 该接口通过指定节点类型切换AZ。 调用方法 请参见如何调用API。 URI POST /v1.0/{project_id}/clusters/{cluster_id}/inst-type/{inst_type}/azmigrate 表1 路径参数 参数
查询证书列表 功能介绍 该接口用于查询证书列表。 调用方法 请参见如何调用API。 URI GET /v1.0/{project_id}/clusters/{cluster_id}/certs 表1 路径参数 参数 是否必选 参数类型 描述 project_id 是 String
获取参数配置列表 功能介绍 该接口用于获取当前集群现有的YAML参数配置列表。 调用方法 请参见如何调用API。 URI GET /v1.0/{project_id}/clusters/{cluster_id}/ymls/template 表1 路径参数 参数 是否必选 参数类型
如果集群跨地域或跨账号,请参考配置跨区域复制将源集群存储快照的OBS桶复制到目标集群存储快照的OBS桶中,迁移时在目标集群执行恢复操作。 操作步骤 登录云搜索服务管理控制台。 在“集群管理 > Elasticsearch”页面,单击源端集群名称“Es-1”进入集群基本信息页面。 在左侧导航栏选择
集群一直处于快照中 集群一直处于快照中,有三个比较常见的原因: 集群数据量大或者集群压力大,备份快照耗时长。 单个节点的快照速度默认是40MB/s,同时,快照的性能还受集群情况影响,如果此时集群负载较高,耗时将会更久。可以通过上述章节的查询单个快照信息查询正在执行的快照情况。 执行GET
如果之前购买折扣套餐包时选择了自动续费,折扣套餐包到期后,会自动续费套餐包。 云搜索服务支持按需计费和包年/包月2种计费模式,您可以根据业务需求,将按需计费转换为包年/包月计费模式。 按需计费转换为包年包月计费模式的操作指导如下,转换后立即生效。 登录云搜索服务管理控制台。 在集群管理页面,选择需要更改计费模式的集群。
配置Logstash迁移任务 创建Logstash配置文件 启动Logstash迁移任务 停止Logstash迁移任务 Logstash配置文件模板介绍 父主题: 使用Logstash迁移数据
指定节点类型规格变更 功能介绍 修改集群规格。支持修改: ess: 数据节点。 ess-cold: 冷数据节点。 ess-client: Client节点。 ess-master: Master节点。 lgs:Lgs节点。 在变更磁盘类型前,建议备份所有关键数据,以免造成数据丢失。
按需集群转包周期 功能介绍 该接口用于按需集群转包周期集群。 调用方法 请参见如何调用API。 URI POST /v1.0/{project_id}/cluster/{cluster_id}/period 表1 路径参数 参数 是否必选 参数类型 描述 project_id 是
查询证书列表 功能介绍 该接口用于查询证书列表。 调用方法 请参见如何调用API。 URI GET /v1.0/{project_id}/clusters/{cluster_id}/elb/certificates 表1 路径参数 参数 是否必选 参数类型 描述 project_id
参数解释: 快照创建时间。 datastore ListSnapshotBackupsDatastoreResp object 参数解释: 数据搜索引擎类型。 description String 参数解释: 快照描述信息。 id String 参数解释: 快照ID。 clusterId
批量添加或删除集群标签 功能介绍 该接口用于对集群批量添加或删除标签。 调用方法 请参见如何调用API。 URI POST /v1.0/{project_id}/{resource_type}/{cluster_id}/tags/action 表1 路径参数 参数 是否必选 参数类型