-
什么是区域和可用区 - 云搜索服务 CSS
Region指面向公共租户提供通用云服务的Region;专属Region指只承载同一类业务或只面向特定租户提供业务服务的专用Region。 可用区(AZ,Availability Zone):一个AZ是一个或多个物理数据中心的集合,有独立的风火水电,AZ内逻辑上再将计算、网络、存
-
使用CSS加速数据库的查询分析 - 云搜索服务 CSS
本章主要介绍,如何将MySQL数据库中的数据同步到云搜索服务CSS,通过CSS实现数据库的全文检索与Ad Hoc查询分析加速。方案架构图如图1所示。 图1 CSS加速数据库的查询分析方案 用户业务数据存储到MySQL。 通过数据复制服务DRS将MySQL中的数据实时同步到CSS。 通过CSS进行全文检索与数据查询分析。
-
责任共担 - 云搜索服务 CSS
华为云:负责云服务自身的安全,提供安全的云。华为云的安全责任在于保障其所提供的 IaaS、PaaS 和 SaaS 类云服务自身的安全,涵盖华为云数据中心的物理环境设施和运行其上的基础服务、平台服务、应用服务等。这不仅包括华为云基础设施和各项云服务技术的安全功能和性能本身,也包括
-
基本概念 - 云搜索服务 CSS
一个可用区是一个或多个物理数据中心的集合,有独立的风火水电,AZ内逻辑上再将计算、网络、存储等资源划分成多个集群。一个Region中的多个AZ间通过高速光纤相连,以满足用户跨AZ构建高可用性系统的需求。 项目 区域默认对应一个项目,这个项目由系统预置,用来隔离物理区域间的资源(计算资源、存
-
使用备份与恢复迁移集群数据(源端为第三方Elasticsearch) - 云搜索服务 CSS
使用备份与恢复迁移集群数据(源端为第三方Elasticsearch) 自建ES到华为云ES之间的数据迁移和第三方友商ES到华为云ES之间的数据迁移,可以参考本章操作指导。 前提条件 使用备份与恢复时,需确认如下2点: 目的端ES版本≥源端ES版本 目的端ES的候选主节点数>源端ES的候选主节点数的一半
-
缩容集群节点数量 - 云搜索服务 CSS
缩容什么节点类型的“节点数量”,缩容完成后只生效新该节点类型的“节点数量”,其他节点类型的“节点数量”保持不变。 要确保缩容之后的磁盘使用量小于80%,且集群每个节点类型中每个AZ的节点数至少为1。 缩容过程会涉及数据迁移,将要下线的节点数据迁移到其他节点上,数据迁移的超时阈值为5小
-
场景描述 - 云搜索服务 CSS
图像检索、视频搜索、推荐等场景下日益增长的数据规模,对高维空间向量检索的时延和准确率提出了更高的要求。云搜索服务针对大规模的向量检索场景提供了具体的解决方案,基于华为云自研的向量搜索引擎,结合Elasticsearch的插件机制,高效集成了向量检索能力。 原理 向量检索从本质上讲,其思维框架和传统的检索方法没
-
源端为数据库 - 云搜索服务 CSS
MySQL等关系型数据库之间的数据迁移和同步,支持的数据库类型请参见同步方案概览。 表1为DRS服务所支持的源数据库迁移至CSS服务的具体指导。 表1 数据同步指导 源数据库类型 目标数据库类型 同步模式 相关文档 RDS for MySQL CSS/ES 全量+增量数据同步 将MySQL同步到CSS/ES
-
Kibana是否支持导出数据功能? - 云搜索服务 CSS
Kibana是否支持导出数据功能? Kibana导出数据需要依赖SQL Workbench插件,目前云搜索服务只有Elasticsearch 7.6.2及以上的版本支持。 在Kibana的SQL Workbench里,输入Elasticsearch SQL语句可以查询数据,也可以“Dow
-
创建安全模式集群 - 云搜索服务 CSS
此参数指定的节点将被作为Master节点和Client节点,同时具备集群管理、存储数据、提供接入集群和分析数据的服务。此时,为保证集群中数据的稳定性,建议设置节点数量大于等于3个。 如果启用Master节点,且未启用Client节点,此参数指定的节点将用于存储数据并提供Client节点功能。
-
创建集群 - 云搜索服务 CSS
此参数指定的节点将被作为Master节点和Client节点,同时具备集群管理、存储数据、提供接入集群和分析数据的服务。此时,为保证集群中数据的稳定性,建议设置节点数量大于等于3个。 如果启用Master节点,且未启用Client节点,此参数指定的节点将用于存储数据并提供Client节点功能。
-
Filebeat版本与集群版本的关系 - 云搜索服务 CSS
Filebeat版本与集群版本的关系 非安全模式集群:不限制。 安全模式集群:需使用跟集群版本配套的filebeat oss版本,请参考https://www.elastic.co/cn/downloads/past-releases#filebeat-oss进行下载。 父主题:
-
扩容集群 - 云搜索服务 CSS
该接口用于集群扩容实例(仅支持扩容elasticsearch实例)。只扩容普通节点,且只针对要扩容的集群实例不存在特殊节点(Master、Client、冷数据节点)的情况。集群扩容实例的数量和存储容量,请参考扩容实例的数量和存储容量。 调用方法 请参见如何调用API。 URI POST /v1.0
-
单节点的使用率过高是否会影响集群的业务? - 云搜索服务 CSS
arch会尝试将对应节点中的分片迁移到其他磁盘使用率比较低的数据节点中。 单节点使用率超过95%:系统会对Elasticsearch集群中对应节点里每个索引强制设置 read_only_allow_delete 属性,此时该节点上的所有索引将无法写入数据,只能读取和删除对应索引。
-
背景信息 - 云搜索服务 CSS
背景信息 云搜索服务支持将热数据存储在SSD来达到最佳的查询检索性能。将历史数据存储在OBS中降低数据的存储成本,该特性为存算分离特性。 使用场景 对于有海量数据写入和存储的场景,一般数据有明显的冷热区分,新写入的数据存储在SSD中,随着时间的推移,历史数据不再写入,查询QPS也降低
-
快速开始使用云搜索服务 - 云搜索服务 CSS
节点,保证集群的稳定性。 本场景示例无需启用Client节点。 启用冷数据节点 冷数据节点用于存放对于历史数据要求分钟级别的返回。当用户对历史数据返回时间要求不是很高的话,可以将这部分数据存储在冷数据节点上,从而降低成本。 本场景示例无需启用冷数据节点。 设置集群的企业项目。 如
-
如何跨Region迁移CSS集群? - 云搜索服务 CSS
CSS集群不支持直接迁移,但可以通过OBS桶备份和恢复的方式进行数据迁移实现集群迁移。 如果OBS桶在同一个区域,请参考备份与恢复索引进行集群迁移。 如果OBS桶跨区域,请先参考配置跨区域复制进行跨区域复制OBS桶,再参考备份与恢复索引进行集群迁移。 在跨区域复制之前,要保证目标集群设置的快照文件夹为空,否则无
-
使用云服务Logstash全量迁移集群数据 - 云搜索服务 CSS
中创建的集群名称,进入集群的基本信息页面。选择“配置中心”,或者直接单击目标集群操作列的“配置中心”,进入配置中心页面。 选择步骤三:配置Logstash全量迁移任务中所创建的配置文件,单击左上角的“启动”。 根据界面提示,选择是否启动Logstash服务会立刻开始迁移数据。 如
-
用户平时需要关注云搜索服务的哪些监控指标 - 云搜索服务 CSS
不低于某特定值(如85%)的情况,则发出相应告警。 如果在某段时间内(如5min),集群健康状态出现多次(如5次)大于0的情况,则发出相应告警。 采取措施: 收到与磁盘使用率有关的告警时,可以调查磁盘空间消耗,查看是否可以从集群节点中删除数据或是将数据存档到其他系统以释放空间,或者扩容磁盘。
-
查看索引读写流量 - 云搜索服务 CSS
0/s 表2 返回信息的参数说明 参数名 说明 index 索引名称。 begin 查看监控数据的起始时间。 end 查看监控数据的结束时间。 status 查询监控时间间隔内的索引状态。 pri 查询监控时间间隔内的索引的shard数量。 rep 查询监控时间间隔内的索引副本数量。 init