检测到您已登录华为云国际站账号，为了您更好的体验，建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
检测到您已登录华为云国际站账号，为了您更好的体验，建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
Hive客户端接入Elasticsearch集群 Elasticsearch-Hadoop (ES-Hadoop) 连接器将Hadoop海量的数据存储和深度加工能力与Elasticsearch实时搜索和分析功能结合在一起。它能够让您快速深入了解大数据，并让您在Hadoop生态系统中更好地开展工作。
配置Elasticsearch集群向量检索 存算分离 存算分离支持将集群新写入的数据存储在SSD来达到最佳的查询检索性能，将历史数据存储到OBS中降低数据的存储成本。 存算分离和切换冷热数据比，更适用于对搜索性能要求不高的场景，冷数据存储在OBS中，存储成本更低一些。 Elasticsearch 7.6.2、Elasticsearch
节点规格”、“节点数量”和“节点存储”。“节点数量”可设置为1~32任意数值。“节点存储”的存储容量为固定值，存储类型可以根据实际情况选择。 启用冷数据节点 冷数据节点用于存储对查询时延要求不高，但数据量较大的历史数据，是管理大规模数据集和优化存储成本的有效方式。 启用冷数据节点
节点规格”、“节点数量”和“节点存储”。“节点数量”可设置为1~32任意数值。“节点存储”的存储容量为固定值，存储类型可以根据实际情况选择。 启用冷数据节点 冷数据节点用于存储对查询时延要求不高，但数据量较大的历史数据，是管理大规模数据集和优化存储成本的有效方式。 启用冷数据节点
_snapshot/my_backup/snapshot_1 通过华为云对象存储迁移服务OMS将快照数据从存储仓库迁移到对象存储服务OBS的“esbak”桶中。 OMS支持多种云服务商数据迁移到对象存储服务OBS中，具体请参见各云服务商迁移教程。 在OMS创建迁移任务时，“元数据
[monitoring] total store size in bytes 集群总文档所占用的存储空间变化。 [monitoring] indices store_size for top10 占用存储空间最多的Top10索引。 [monitoring] indices docs_count
通过索引生命周期管理实现OpenSearch集群存算分离 方案概述 CSS支持存算分离，即将索引冻结到OBS来降低冷数据的存储成本。本文介绍如何使用索引生命周期管理，在特定的时间自动冻结索引，实现存算分离。 本案例通过配置生命周期策略，实现索引在创建3天后，自动被冻结，数据转储到
Tools”，进入操作页面。 在Kibana操作页面设置template，通过设置集群模板将相应的索引数据存储到冷热数据节点上。 例如，执行如下命令设置template将以“myindex”开头的索引存储到冷数据节点上。 Elasticsearch版本<6.x的创建模板命令 PUT _template/test
查看缓存统计信息 GET /_vector/stats 在向量插件实现中，向量索引与Lucene其他类型索引一样，每一个segment构造并存储一份索引文件，在查询时，该索引文件会被加载到堆外内存中。插件使用缓存机制对这些堆外内存进行管理。上述API能够查询当前堆外内存使用量、缓存命中次数、加载次数等信息。
在OpenSearch Dashboards操作页面设置template，通过设置集群模板将相应的索引数据存储到冷热数据节点上。 例如，执行如下命令设置template将以“myindex”开头的索引存储到冷数据节点上。 PUT _template/test { "order": 1, "index_patterns":
在嵌套字段中使用向量索引 使用嵌套字段可以实现在单条文档中存储多条向量数据，比如在RAG场景中，文档数据通常需要按段落或按长度进行切分，分别进行向量化得到多条语义向量，通过嵌套字段（Nested）可以将这些向量写入同一条ES的文档中。对于包含多条向量数据的文档，查询时任意一条向量数据与查询向量相似便会返回该条文档。
查看缓存统计信息 GET /_vector/stats 在向量插件实现中，向量索引与Lucene其他类型索引一样，每一个segment构造并存储一份索引文件，在查询时，该索引文件会被加载到堆外内存中。插件使用缓存机制对这些堆外内存进行管理。上述API能够查询当前堆外内存使用量、缓存命中次数、加载次数等信息。
提升分组聚合能力依赖排序键和聚簇键。 排序键：数据按照排序键顺序存储。 聚簇键：是排序键的前缀子集，数据按照聚簇键聚簇在一起。 聚合增强常见的使用场景请参见表1。 表1 聚合增强的使用场景 场景 描述 相关文档 低基字段聚合 表示对具有较少不同值的列进行聚合，如对一个存储类别的列进行聚合。 低基字段分组聚合
删除Elasticsearch集群快照 当快照信息不需要使用时，您可以删除快照释放存储资源。 当自动创建快照功能开启时，自动创建的快照无法手动删除，系统会按照设置的策略在半点时刻自动删除超过“保留时间”的快照。 当自动创建快照功能开启又关闭了，关闭时，之前已自动创建的快照并未同步
删除OpenSearch集群快照 当快照信息不需要使用时，您可以删除快照释放存储资源。 当自动创建快照功能开启时，自动创建的快照无法手动删除，系统会按照设置的策略在半点时刻自动删除超过“保留时间”的快照。 当自动创建快照功能开启又关闭了，关闭时，之前已自动创建的快照并未同步删除，
按需计费资源生命周期 华为云根据客户等级定义了不同客户的宽限期和保留期时长。 避免和处理欠费 欠费后需要及时充值，详细操作请参见账户充值。 当存储在对象存储服务OBS中的快照数据不再使用时，可以删除数据，以免继续扣费。 您可以在“费用中心 > 总览”页面设置“可用额度预警”功能，当可用额度
如果集群没有备份快照，则删除后不可恢复集群数据。当集群启用过快照功能，且OBS桶中创建的快照并未被删除，此时删除集群时，并不会释放这部分备份数据。如果有需要，可以通过OBS桶中存储的快照信息恢复数据，具体参见集群被删除后是否还能恢复？。 当集群已开通终端节点服务时，当前账号必须要有删除终端节点的权限，否则集群删除后并
如果集群没有备份快照，则删除后不可恢复集群数据。当集群启用过快照功能，且OBS桶中创建的快照并未被删除，此时删除集群时，并不会释放这部分备份数据。如果有需要，可以通过OBS桶中存储的快照信息恢复数据，具体参见集群被删除后是否还能恢复？。 当集群已开通终端节点服务时，当前账号必须要有删除终端节点的权限，否则集群删除后并
计费项 说明 节点规格 包括vCPUs和内存。 节点存储 节点的磁盘存储类型和节点存储大小。 公网带宽 集群开通公网访问或者Kibana公网访问功能时，会产生带宽费用，带宽的计费模式同为按需计费。 假设您计划购买一个节点存储为高I/O 40GB的集群，且选择Kibana公网访问
格。 规划存储容量 在规划CSS集群的存储容量时，应考虑数据量、副本因子、数据膨胀率和磁盘使用率等多个关键因素。以下是一个推荐的计算方法，用以确定所需的集群存储容量。 存储容量=源数据x（1+副本数量）x（1+数据膨胀率）x（1+预留空间比例） 源数据：首先确定预期存储的原始数据量。
长按/截图保存，微信识别二维码
或者关注公众号“华为云”
