检测到您已登录华为云国际站账号,为了您更好的体验,建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
例如,有可能关闭了连接,有可能有防火墙,交换机,VPN等,也有可能是keepalive设置问题,更换了连接服务器节点,网络不稳定等。 处理步骤 如果出现这种情况可以选择如下多种方式解决问题。 方法一 修改RestHighLevelClient连接请求的超时时间 ,默认1000ms可以尝试增加到10000ms。
nput)迁移数据到不同的目的端(output)。 约束限制 创建的配置文件大小不能超过100k。 Logstash集群允许最多配置50个配置文件,最多可以同时存在5个“状态”为“校验中”的配置文件。 前提条件 创建配置文件前,必须先获取数据源和目的端的服务器或集群信息,例如IP地址、用户名、密码等。
离 方案概述 CSS支持存算分离,即将索引冻结到OBS来降低冷数据的存储成本。本文介绍如何使用索引生命周期管理,在特定的时间自动冻结索引,实现存算分离。 本案例通过配置生命周期策略,实现索引在创建3天后,自动被冻结,数据转储到OBS中;当索引创建7天后,删除该索引。 图1 存算分离
删除集群时,会清理集群业务数据,请谨慎操作。 如果集群没有备份快照,则删除后不可恢复集群数据。当集群启用过快照功能,且OBS桶中创建的快照并未被删除,此时删除集群时,并不会释放这部分备份数据。如果有需要,可以通过OBS桶中存储的快照信息恢复数据,具体参见集群被删除后是否还能恢复?。 当集群已开通终端节点服务
删除集群时,会清理集群业务数据,请谨慎操作。 如果集群没有备份快照,则删除后不可恢复集群数据。当集群启用过快照功能,且OBS桶中创建的快照并未被删除,此时删除集群时,并不会释放这部分备份数据。如果有需要,可以通过OBS桶中存储的快照信息恢复数据,具体参见集群被删除后是否还能恢复?。 当集群已开通终端节点服务
参数解释: 日志备份ID,通过系统UUID生成。 clusterId String 参数解释: 集群ID。 obsBucket String 参数解释: 用于存储日志的OBS桶的桶名。 agency String 参数解释: 委托名称,委托给CSS,允许CSS调用您的其他云服务。 updateAt
“授权账号ID”可以在“我的凭证”中进行查看“账号ID”获取。 已有集群开启终端节点服务 如果创建集群时未开启终端节点服务,集群创建成功后,可以通过如下步骤进行开启。 登录云搜索服务管理控制台。 在集群管理页面,单击需要开启终端节点服务的集群名称,进入集群基本信息页面。 选择“终端节点服务”,
“授权账号ID”可以在“我的凭证”中进行查看“账号ID”获取。 已有集群开启终端节点服务 如果创建集群时未开启终端节点服务,集群创建成功后,可以通过如下步骤进行开启。 登录云搜索服务管理控制台。 在集群管理页面,单击需要开启终端节点服务的集群名称,进入集群基本信息页面。 选择“终端节点服务”,
入上述创建的my_dict索引中。 调用注册接口。 将上述创建的my_dict索引注册具有全局唯一标识名称(dict_name)的Dict对象。 PUT _vector/register/my_dict { "dict_name": "my_dict" } 创建I
Dashboards操作页面,执行命令查看集群是否存在索引。 GET _cat/indices?v 当待导入数据的集群已存在可用的索引时,则不需要再创建索引,直接执行步骤7。 当待导入数据的集群不存在可用的索引时,则需要执行下一步创建索引。 在OpenSearch Dashboards执行命令,创建待导入数
Alerting”。 新建一个SMN目的端用于发送告警消息。 在“Alerting”页面选择“Destinations”页签,单击“Add destination”配置目的端信息。 表1 Destinations参数说明 参数名称 说明 Name 自定义目的端名称。 Type 保持默认值“SMN”。
化。 命名空间 SYS.ES CSS.CUSTOM 集群监控指标列表 监控的指标ID、指标名称、指标含义以及取值范围参见表1。 监控的测量对象:CSS集群。本文介绍的是Logstash集群的监控指标列表。 监控的监控周期(原始指标):1分钟 累计值:从节点启动时开始叠加数值,当节点重启后清零重新累计。
在Kibana操作页面,执行命令查看集群是否存在索引。 GET _cat/indices?v 当待导入数据的集群已存在可用的索引时,则不需要再创建索引,直接执行步骤7。 当待导入数据的集群不存在可用的索引时,则需要执行下一步创建索引。 在Kibana执行命令,创建待导入数据的索引,并指定自定义映射来定义数据类型。
快照、词库、日志管理功能使用 obs:bucket:Get* obs:bucket:List* obs:object:List* obs:object:Get* obs:bucket:HeadBucket obs:object:PutObject obs:object:DeleteObject
参数类型 描述 clusterLogRecord Array of clusterLogRecord objects 参数解释: 集群日志记录实体对象。 表4 clusterLogRecord 参数 参数类型 描述 id String 参数解释: 日志任务ID,通过系统UUID生成。 clusterId
是否必选 参数类型 描述 bucket 是 String 备份使用的OBS桶的桶名。 agency 是 String 委托名称,委托给CSS,允许CSS调用您的其他云服务。 basePath 否 String 快照在OBS桶中的存放路径。 响应参数 无 请求示例 开启快照功能。 POST
性能测试对比 测试环境 数据集: esrally nyc_taxis数据集 集群规格: 4U16G 100GB高IO * 3节点 测试步骤 在集群中创建索引模板,指定排序键和关闭聚合增强。 PUT /_template/nyc_taxis { "template": "nyc_taxis*"
实时性:Elasticsearch的近实时搜索能力确保排序结果的时效性。 前提条件 已经准备好Elasticsearch集群,且集群处于可用状态。 操作步骤 本文的代码示例仅适用于Elasticsearch 7.x及以上版本的集群。 登录云搜索服务管理控制台。 在左侧导航栏,选择“集群管理”,
"css_backup/711/", //备份路径 "chunk_size" : "2g", "endpoint" : "obs.xxx.com:443", //OBS域名地址 "region" : "xxx", //Region名称 "compress"
请求参数 表2 请求Body参数 参数 是否必选 参数类型 描述 listener 是 EsListenerRequest object 监听器对象。 表3 EsListenerRequest 参数 是否必选 参数类型 描述 default_tls_container_ref 是 String