-
查看集群风险项 - 云搜索服务 CSS
检测集群数据节点/冷数据节点的存储用量是否均衡,不均衡的存储用量分布可能导致集群负载不均,读写延迟增加。 连续5分钟检测当前集群是否有节点脱离或不可用。 检测节点分片数量是否过多,单节点分片数量过多会消耗大量节点资源,读写请求时延增加,集群元数据更新缓慢等。 检测所有分片大小,分片太大可能导致查询性能下降,节
-
查看集群风险项 - 云搜索服务 CSS
检测集群数据节点/冷数据节点的存储用量是否均衡,不均衡的存储用量分布可能导致集群负载不均,读写延迟增加。 连续5分钟检测当前集群是否有节点脱离或不可用。 检测节点分片数量是否过多,单节点分片数量过多会消耗大量节点资源,读写请求时延增加,集群元数据更新缓慢等。 检测所有分片大小,分片太大可能导致查询性能下降,节
-
使用CSS加速数据库的查询分析 - 云搜索服务 CSS
验证数据库的同步状态。 全量数据同步验证。 在CSS的Kibana中执行如下命令,确认全量数据是否同步到CSS。 GET student/_search 源端插入新数据,验证数据是否会同步到CSS。 例如,源端插入“id”为“4”的新数据。 INSERT INTO student
-
配置缓存 - 云搜索服务 CSS
配置缓存 将数据转储到OBS后,为了尽可能的减少对OBS的访问请求,并提升ES的查询性能,系统将会缓存部分数据。第一次获取到数据时,会直接访问OBS,之后将获取到的数据缓存在内存中,后续访问会先检查是否有缓存。数据缓存支持内存和文件。 ES访问不同的文件访问的模式是不一样的,缓存系统
-
云搜索服务 CSS - 云搜索服务 CSS
西哥城一、拉美-墨西哥城二、拉美-圣保罗一。 备份与恢复索引 为避免数据丢失,您可以将集群的索引数据进行备份,当数据发生丢失或者想找回某一时间段数据时,您可以通过恢复索引操作快速获得数据。索引的备份是通过创建集群快照实现。第一次备份时,建议将所有索引数据进行备份。 备份与恢复索引
-
数据量很大,如何进行快照备份? - 云搜索服务 CSS
"indices": "*", //备份的索引,*表示索引,逗号分隔 "ignore_unavailable": true, //是否忽略单个index是否可用,true表示忽略 "include_global_state": false //默认false表示cluster s
-
配置YML参数 - 云搜索服务 CSS
块的参数值。 表1 模块参数信息说明 模块名称 参数名称 说明 跨域访问 http.cors.allow-credentials 跨域访问是否返回头部的Access-Control-Allow-Credentials。 取值范围:true、false。 默认值:false。 http
-
创建集群 - 云搜索服务 CSS
若payModel为3,则有效值为1-3。 isAutoRenew 否 Integer 是否自动续订,为空时表示不自动续订。 1: 自动续订。 0:不自动续订(默认)。 isAutoPay 否 Integer 是否自动支付。下单订购后,是否自动从客户的华为云账户中支付,而不需要客户手动去进行支付。该参数适用于包周期集群。
-
配置YML参数 - 云搜索服务 CSS
块的参数值。 表1 模块参数信息说明 模块名称 参数名称 说明 跨域访问 http.cors.allow-credentials 跨域访问是否返回头部的Access-Control-Allow-Credentials。 取值范围:true、false。 默认值:false。 http
-
系统模板配置参数说明 - 云搜索服务 CSS
elastic.co/guide/en/logstash/7.10/plugins-inputs-redis.html 表1 参数说明 参数 是否必填 说明 data_type 是 数据源类型。包括list,channel,pattern_channel。 如果data_type为list,则使用BLPOP密钥。
-
Elasticsearch集群最大堆内存持续过高(超过90%) - 云搜索服务 CSS
排查集群的写入和查询队列,查看是否有大量任务堆积。 GET /_cat/thread_pool/write?v GET /_cat/thread_pool/search?v 查看集群监控,排查集群的写入和查询任务相关指标。 如果集群长期处于高堆内存占用状态,查看集群节点个数、节点规模,确认是否需要扩容。
-
使用云服务Logstash增量迁移集群数据 - 云搜索服务 CSS
此处命令是迁移2021-05-25之后新增加的数据,在多次增量迁移过程中需要修改此处的日志值,如果日期是时间戳方式请转换为时间戳。此处命令需要提前验证有效性。 scroll 当源端数据量过大,为了防止logstash内存溢出,可以使用scroll分批次获取数据。默认为"1m"。间隔时间不要太长,否则可能会丢失数据。
-
Elasticsearch集群平均已用内存比例达到98% - 云搜索服务 CSS
Elasticsearch集群平均已用内存比例达到98% 问题现象 查看集群监控发现,Elasticsearch集群“平均已用内存比例”一直处于98%,用户担心内存比例过高是否对集群有影响。 问题原因 在Elasticsearch集群中,Elasticsearch会占用50%内存,另外50%内存会被Lucene用
-
Spring Boot使用Elasticsearch出现Connection reset by peer问题 - 云搜索服务 CSS
http-keepalive是保证一个TCP连接尽可能传递多的报文,每次交互一个报文后就会更新http-keepalive时间。如果http-keepalive时间超时,意味这个这段时间client和server没有报文交互,本端会主动关闭释放连接。 tcp-keepalive是一种探测TCP
-
开源搜索引擎咨询 - 云搜索服务 CSS
json里设置了1个分片,是否可以通过修改配置,达到4分片,2副本的效果 Elasticsearch集群分片过多会有哪些影响 在CSS的控制台界面怎么查看集群的分片数以及副本数? Elasticsearch集群在Kibana如何查询索引数据 CSS是否支持停止集群 Elastic
-
请求采样统计 - 云搜索服务 CSS
访问量。 表1 请求统计的配置参数说明 配置名 类型 说明 flowcontrol.log.access.enabled Boolean 是否统计最近访问ES集群的客户端IP地址及其请求数量统计。取值: true false(默认值) flowcontrol.log.access
-
Elasticsearch集群出现写入拒绝“Bulk Reject”,如何解决? - 云搜索服务 CSS
检查分片(shard)数据量是否过大。 单个分片数据量过大,可能引起Bulk Reject,建议单个分片大小控制在20GB - 50GB左右。可在kibana控制台,通过如下命令查看索引各个分片的大小。 GET _cat/shards?index=index_name&v 检查分片数是否分布不均匀。
-
Elasticsearch集群中某个客户端节点的node.roles为i表示该节点是ingest节点吗? - 云搜索服务 CSS
问题描述 集群某个客户端节点的“node.roles”为“i”表示该节点是ingest节点吗? 如果客户端节点是ingest节点,那么集群中是否存在Coordinating only node,所有节点都是Coordinating node分摊来客户端请求吗? 如果没有ingest
-
查询冷数据性能提升 - 云搜索服务 CSS
查询冷数据性能提升 背景信息 在Kibana的Discover页面的首次查询时,由于此时无任何缓存,导致所有数据均需要从OBS上获取。当命中的文档数量较多时,需要耗费大量的时间从OBS上获取对应的时间字段以及文件元数据。如果将这一部分数据直接缓存在本地,即可大量提升查询性能,解决Discover页面首次查询慢的问题。
-
通过Curl命令行接入集群 - 云搜索服务 CSS
中可以通过Curl命令直接访问Elasticsearch集群,此方法多用于前期调试Elasticsearch的连接性,排查访问集群的客户端是否和Elasticserach节点的网络连通。 准备工作 CSS集群处于可用状态。 已经具备满足如下要求的ECS: ECS的VPC需要与CS