开启“保持常驻”以后,将会在每个节点上面配置一个守护进程,当logstash服务出现故障的时候,会主动拉起并修复。“保持常驻”不适用于短期运行的业务,因为多次主动拉起logstash服务会导致数据迁移重复。 names 是 Array of strings 配置文件名称。
请求参数 表2 请求Body参数 参数 是否必选 参数类型 描述 name 是 String 配置文件名称。
confContent String 配置文件内容。 status String 操作状态。 updateAt String 更新时间,格式为ISO8601:CCYY-MM-DDThh:mm:ss。 errorMsg String 错误信息。
在跨三个可用区部署中,为了保证其中任意一个AZ不可用时,剩余的AZ可以继续提供服务,因此索引的副本数至少要为1个。为了提高集群的查询能力,也可以设置更多的副本。由于Elasticsearch默认的副本数为1个,因此需要用户修改setting配置来实现修改索引副本个数。
单击集群名称进入集群“基本信息”页面,集群配置信息中的“可用区”即集群所分布的可用区。 图1 集群配置信息 父主题: CSS集群管理
clusterId String 参数解释: 指定配置自定义词库的集群ID。 operateStatus String 参数解释: 操作状态。 id String 参数解释: 词库的ID。 请求示例 查询自定义词库的加载状态。
无法配置含特殊字符和中文字符的委托,允许使用的委托名称仅可包含a-zA-Z0-9-_字符。action不等于real_time_log_collect时必选。 logBasePath 否 String 日志在OBS桶中的备份路径。 备份路径不能包括下列符号 ::*?"
接入多种数据源 无缝对接FTP/OBS/Hbase/Kafka等多种数据源,仅需简单配置,无需编程。 一键化操作 一键申请集群、一键扩容、一键重启,从小规模测试到大规模上线,所有主要操作都是一键可达。
如果是同VPC下跨子网访问,需要单独申请路由配置。 如果是不同的VPC不同的子网访问,需要先通过对等连接,打通两个VPC网络,然后单独申请路由配置,联通两个子网。 父主题: CSS集群访问
Bulk路由优化 Bulk聚合优化 通过指定配置项“index.aggr_perf_batch_size”可以开启集群的Bulk聚合优化。
Bulk路由优化 Bulk聚合优化 通过指定配置项“index.aggr_perf_batch_size”可以开启集群的Bulk聚合优化。
listActions 查询配置文件内容 cluster showGetConfDetail 删除配置文件 cluster deleteConf 删除自定义模板 cluster deleteTemplate 热启动Pipeline迁移数据 cluster startHotPipeline
如果集群版本小于7.x,当“集群状态”变为“可用”时,还需要重启集群的所有数据节点和冷数据节点,使新增节点的配置生效。如果不重启使新增节点配置生效,使用集群时因为上报机制问题可能显示不可用状态(集群业务并未不可用)。重启操作请参见重启Elasticsearch集群。
如果集群版本小于7.x,当“集群状态”变为“可用”时,还需要重启集群的所有数据节点和冷数据节点,使新增节点的配置生效。如果不重启使新增节点配置生效,使用集群时因为上报机制问题可能显示不可用状态(集群业务并未不可用)。重启操作请参见重启Elasticsearch集群。
表3 pipelines 参数 参数类型 描述 name String 参数解释: 配置文件名称。 status String 参数解释: pipeline状态。 取值范围: available:表示可用。 unavailable:表示不可用。 working:表示工作中。
图6 Logstash配置中心界面 在配置中心界面,单击右上角“创建”,进入创建配置文件页面,编辑配置文件。 图7 配置任务 表5 创建配置文件参数说明 参数 说明 取值样例 名称 自定义配置文件名称。 只能包含字母、数字、中划线或下划线,且必须以字母开头。
cluster listYmls 获取参数配置任务列表 cluster listYmlsJob 获取参数配置列表 cluster updateYmls 查询集群支持的elbv3负载均衡器 cluster listElbs 打开或关闭ES负载均衡器 cluster enableOrDisableElb
cluster listYmls 获取参数配置任务列表 cluster listYmlsJob 获取参数配置列表 cluster updateYmls 查询集群支持的elbv3负载均衡器 cluster listElbs 打开或关闭ES负载均衡器 cluster enableOrDisableElb
如果集群已经启用了日志备份功能,也可以单击“日志备份配置”右侧的编辑图标,在“编辑日志备份配置”窗口,参考表1更新日志备份的配置参数。 表1 日志备份配置 参数 说明 注意事项 “OBS桶” 选择日志存储的OBS桶。单击右侧的“创建桶”支持新建OBS桶。
如果集群已经启用了日志备份功能,也可以单击“日志备份配置”右侧的编辑图标,在“编辑日志备份配置”窗口,参考表1更新日志备份的配置参数。 表1 日志备份配置 参数 说明 注意事项 “OBS桶” 选择日志存储的OBS桶。单击右侧的“创建桶”支持新建OBS桶。
您即将访问非华为云网站,请注意账号财产安全