-
性能说明 - 云搜索服务 CSS
性能说明 通过Elasticsearch官方提供的benchmark脚本rally1.0.0,对云搜索服务的集群(版本:7.6.2) 进行性能测试。 本次测试采用官方提供的geonames,大小3.2G,11396505个doc。索引采用6个shard(默认为5个)。性能指标说明
-
向量检索的性能调优 - 云搜索服务 CSS
向量检索的性能调优 写入性能优化 关闭副本,待数据导入完成后再开启副本,减少副本构建的开销。 调整“refresh_interval”为120s或者更大,避免频繁刷新索引生成大量小的segments,同时减少merge带来的向量索引构建开销。 适当调大“native.vector
-
添加Master/Client节点 - 云搜索服务 CSS
添加Master/Client节点 当集群数据面业务增长,需要动态调整集群形态,增加Master/Client节点时,可以执行“添加Master/Client节点”任务。添加Master/Client节点时,业务不会中断。 前提条件 集群处于“可用”状态,且无正在进行的任务。 约束限制
-
新建集群是否可以使用老集群IP地址? - 云搜索服务 CSS
新建集群是否可以使用老集群IP地址? 原集群的IP地址无法更换为新集群的IP地址。 如果集群IP发生变化,可能原因如下: 集群内网IP发生变化。 确认集群是否进行扩/缩容操作。扩容操作会增加集群内网IP。缩容操作会减少集群IP,如减少的节点有业务运行,会发生故障。 集群公网IP发生变化。
-
其他相关参数优化 - 云搜索服务 CSS
其他相关参数优化 开启上述导入性能增强的优化后,索引merge任务会相应增加,可以通过调整如下配置降低merge任务开销对导入性能的影响: 通过指定配置项“index.merge.scheduler.max_thread_count”,增加shard的合并线程数,减少合并对数据导入的限流。默认为4,建议设置为8。
-
查询集群详情 - 云搜索服务 CSS
updated String 集群上次修改时间,格式为ISO8601: CCYY-MM-DDThh:mm:ss。 name String 集群名称。 publicIp String 公网IP信息。 created String 集群创建时间,格式为ISO8601: CCYY-MM-DDThh:mm:ss。
-
云搜索服务 CSS - 云搜索服务 CSS
西哥城一、拉美-墨西哥城二、拉美-圣保罗一。 备份与恢复索引 为避免数据丢失,您可以将集群的索引数据进行备份,当数据发生丢失或者想找回某一时间段数据时,您可以通过恢复索引操作快速获得数据。索引的备份是通过创建集群快照实现。第一次备份时,建议将所有索引数据进行备份。 备份与恢复索引
-
使用CSS加速数据库的查询分析 - 云搜索服务 CSS
验证数据库的同步状态。 全量数据同步验证。 在CSS的Kibana中执行如下命令,确认全量数据是否同步到CSS。 GET student/_search 源端插入新数据,验证数据是否会同步到CSS。 例如,源端插入“id”为“4”的新数据。 INSERT INTO student
-
查看集群风险项 - 云搜索服务 CSS
检测集群数据节点/冷数据节点的存储用量是否均衡,不均衡的存储用量分布可能导致集群负载不均,读写延迟增加。 连续5分钟检测当前集群是否有节点脱离或不可用。 检测节点分片数量是否过多,单节点分片数量过多会消耗大量节点资源,读写请求时延增加,集群元数据更新缓慢等。 检测所有分片大小,分片太大可能导致查询性能下降,节
-
查看集群风险项 - 云搜索服务 CSS
检测集群数据节点/冷数据节点的存储用量是否均衡,不均衡的存储用量分布可能导致集群负载不均,读写延迟增加。 连续5分钟检测当前集群是否有节点脱离或不可用。 检测节点分片数量是否过多,单节点分片数量过多会消耗大量节点资源,读写请求时延增加,集群元数据更新缓慢等。 检测所有分片大小,分片太大可能导致查询性能下降,节
-
Spring Boot使用Elasticsearch出现Connection reset by peer问题 - 云搜索服务 CSS
http-keepalive是保证一个TCP连接尽可能传递多的报文,每次交互一个报文后就会更新http-keepalive时间。如果http-keepalive时间超时,意味这个这段时间client和server没有报文交互,本端会主动关闭释放连接。 tcp-keepalive是一种探测TCP
-
使用云服务Logstash增量迁移集群数据 - 云搜索服务 CSS
此处命令是迁移2021-05-25之后新增加的数据,在多次增量迁移过程中需要修改此处的日志值,如果日期是时间戳方式请转换为时间戳。此处命令需要提前验证有效性。 scroll 当源端数据量过大,为了防止logstash内存溢出,可以使用scroll分批次获取数据。默认为"1m"。间隔时间不要太长,否则可能会丢失数据。
-
数据量很大,如何进行快照备份? - 云搜索服务 CSS
"indices": "*", //备份的索引,*表示索引,逗号分隔 "ignore_unavailable": true, //是否忽略单个index是否可用,true表示忽略 "include_global_state": false //默认false表示cluster s
-
配置中心 - 云搜索服务 CSS
在配置中心页面,选择“连通性测试”。 输入数据来源的IP地址或域名和端口号,单击“测试”。 图1 连通性测试 连通性测试最多可一次性测试10个IP地址或域名。您可以单击“继续添加”,添加多个IP地址或域名,然后单击“批量测试”,进行一次性测试多个IP地址或域名的连通性。 创建配置文件
-
创建集群 - 云搜索服务 CSS
表示在每周对应时间执行一次。比如SUN表示每周日执行一次。保留快照个数与自动创建快照策略中设置的执行频次和索引有关。当执行频次间隔时间短或索引数据量大,保留自动快照可能会达不到设置的个数,请谨慎选择! 表9 CreateClusterTagsBody 参数 是否必选 参数类型 描述
-
单节点的使用率过高是否会影响集群的业务? - 云搜索服务 CSS
单节点的使用率过高是否会影响集群的业务? 问题现象 查看集群监控发现,Elasticsearch集群“磁盘使用率”达到80%以上,用户担心单节点使用率过高会对集群业务产生影响。 业务影响 单节点使用率超过85%:会导致新的分片无法分配。 单节点使用率超过90%:Elasticsearch
-
es-head插件连接Elasticsearch集群报跨域错误 - 云搜索服务 CSS
es-head插件连接Elasticsearch集群报跨域错误 解决方案 在安装es-head的云主机上测试网络是否连通。 网络连通后,登录云搜索服务管理控制台。 在“集群管理”页面,单击需要修改参数配置的集群名称,进入集群基本信息页面。 选择“参数配置”,单击“编辑”,将“http
-
查询冷数据性能提升 - 云搜索服务 CSS
查询冷数据性能提升 背景信息 在Kibana的Discover页面的首次查询时,由于此时无任何缓存,导致所有数据均需要从OBS上获取。当命中的文档数量较多时,需要耗费大量的时间从OBS上获取对应的时间字段以及文件元数据。如果将这一部分数据直接缓存在本地,即可大量提升查询性能,解决Discover页面首次查询慢的问题。
-
无法使用自定义词库功能 - 云搜索服务 CSS
排查集群的创建时间 登录云搜索服务管理控制台。 在左侧导航栏,选择“集群管理”。 在集群管理列表页,查看待配置自定义词库的集群的“创建时间”。 如果创建时间早于2018年3月10日,则创建该集群时自定义词库功能尚未上线,当前无法为该集群配置自定义词库。 如果创建时间晚于2018年
-
使用delete - 云搜索服务 CSS
使用delete_by_query命令删除数据后,为什么磁盘使用率反而增加? 使用delete_by_query命令删除数据并不是真正意义上的物理删除,它仅仅是对数据增加了删除标记。当再次搜索的时,会搜索全部数据后再过滤掉带有删除标记的数据。 因此,该索引所占的空间并不会因为执行