检测到您已登录华为云国际站账号,为了您更好的体验,建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
安装Logstash之前,需要先安装JDK。在Linux操作系统中,您可以执行yum -y install java-1.8.0命令直接安装1.8.0版本JDK。在Windows操作系统中,您可以访问JDK官网,下载符合操作系统版本的JDK,并根据指导安装。 安装完Logstash后,再根据如下步骤导入数据。安
rch集群。 通过Python客户端接入Elasticsearch集群 MRS Hive客户端 通过MRS的ES-Hadoop实现Hive工具访问与管理Elasticsearch集群。 通过MRS Hive客户端接入Elasticsearch集群 Go客户端 通过Go语言访问与管理Elasticsearch集群。
Elasticsearch集群数据迁移方案介绍 表1 Elasticsearch集群迁移方案 迁移场景 迁移工具 适用场景 使用限制 场景示例 华为云Elasticsearch集群间数据迁移 华为云Logstash 适用于低版本的华为云Elasticsearch集群到高版本的数据迁移。
执行如下命令,获取匹配索引的同步状态。 GET auto_sync/stats 当返回结果中,“failed_count”为“0”时,表示同步完成。 集群同步完成后,检查目标Elasticsearch集群和源集群数据的一致性。 例如,分别在源集群和目标集群登录Kibana,进入Dev Tool,执行GET
“persisted”为基于磁盘的ACKed持久化队列。 默认值:memory queue.checkpoint.writes 表示强制执行检查点之前写入的最大事件数。当“queue.type”配置为“persisted”时,才需要配置该参数。 默认值:1024 queue.max_bytes
needCheckClusterStatus 否 Boolean 是否需要检查集群状态,取值范围为true或false。默认开启校验。 true: 开启集群状态校验。 false: 忽略集群状态校验。 clusterLoadCheck 否 Boolean 是否需要检查集群负载,取值范围为true或false。默认开启校验。
us 否 Boolean 描述:是否需要检查集群状态,取值范围为true或false。默认开启校验。 true: 开启集群状态校验。 false: 忽略集群状态校验。 clusterLoadCheck 否 Boolean 描述:是否需要检查集群负载,取值范围为true或false。默认开启校验。
isolator.strategy String 触发中断控制程序时大查询选取的策略。根据策略选取一条查询进行中断。 说明: 大查询隔离池每秒检查一次,直至堆内存下降到安全范围。 取值范围:fair、mem-first、time-first mem-first策略是指触发中断时,选取
配置访问方式 表2 访问方式 访问方式 说明 取值样例 编程访问 为IAM用户启用访问密钥或密码,支持用户通过API、CLI、SDK等开发工具访问云服务。 勾选 管理控制台访问 为IAM用户启用密码,支持用户登录管理控制台访问云服务。此时凭证类型“密码”为必选项。 勾选 如果IA
功能总览 功能总览 全部 云搜索服务 创建集群 自定义词库 公网访问 备份与恢复索引 接入集群 导入数据到Elasticsearch 迁移集群 日志管理 冷热数据存储 终端节点服务 向量检索 云搜索服务 云搜索服务(Cloud Search Service,简称CSS),是华为云
集群。 通过CDM服务实现Elasticsearch集群间数据迁移 Elasticsearch整库迁移到云搜索服务:通过华为云提供的云迁移工具CDM,实现不同云服务间的集群迁移能力。 华为云Elasticsearch集群迁移至OpenSearch集群 升级Elasticsearc
图4 选择索引策略 单击“Apply”,完成索引关联策略。 当索引关联策略后,ISM会默认创建一个每5分钟运行一次的作业,用于执行策略操作、检查条件并将索引转换为不同的状态。 管理索引策略 在OpenSearch Dashboard的“Index Management”页面,选择“Managed
方案优势 操作简单:Reindex API作为Elasticsearch的内置功能,提供了一个简单直接的方法来迁移数据,无需复杂的配置或额外的工具。 数据处理灵活:在迁移过程中,可以对数据进行处理,例如调整Mapping、分词、Shard等。 性能控制:在迁移过程中,可以通过配置Scroll
目业务中,让各责任组织及时了解各自的成本情况。 华为云成本中心支持通过多种不同的方式对成本进行归集和重新分配,您可以根据需要选择合适的分配工具。 通过关联账号进行成本分配 企业主客户可以使用关联账号对子客户的成本进行归集,从而对子账号进行财务管理。详细介绍请参见通过关联账号维度查看成本分配。
步骤4:删除索引:当不再使用对应的索引数据时,可以删除对应索引节约资源。 准备工作 已注册华为账号并开通华为云,进行了实名认证,且在使用云搜索服务前检查账号状态,账号不能处于欠费或冻结状态。 如果您还没有华为账号,请参考以下步骤创建。 打开华为云网站。 在页面右上角单击“注册”,根据提示信息完成注册。
步骤4:删除索引:当不再使用对应的索引数据时,可以删除对应索引节约资源。 准备工作 已注册华为账号并开通华为云,进行了实名认证,且在使用云搜索服务前检查账号状态,账号不能处于欠费或冻结状态。 如果您还没有华为账号,请参考以下步骤创建。 打开华为云网站。 在页面右上角单击“注册”,根据提示信息完成注册。
图4 选择索引策略 单击“Apply”,完成索引关联策略。 当索引关联策略后,ISM会默认创建一个每5分钟运行一次的作业,用于执行策略操作、检查条件并将索引转换为不同的状态。 管理索引策略 登录云搜索服务管理控制台。 在“集群管理”页面选择需要登录的集群,单击“操作”列中的“Kibana”,登录Kibana页面。
设置采集的日志保存在哪个集群,支持选择“当前集群”和“其他集群”。 默认选择“当前集群”。当选择“其他集群”时,需要选择日志保存的目标集群,并进行集群网络连通性检查,只有在同一VPC网络下的集群才支持跨集群保存日志,且集群版本必须一致。 如果集群已经启用了日志采集功能,也可以单击右侧的编辑图标修改日志采集配置。
设置采集的日志保存在哪个集群,支持选择“当前集群”和“其他集群”。 默认选择“当前集群”。当选择“其他集群”时,需要选择日志保存的目标集群,并进行集群网络连通性检查,只有在同一VPC网络下的集群才支持跨集群保存日志,且集群版本必须一致。 如果集群已经启用了日志采集功能,也可以单击右侧的编辑图标修改日志采集配置。
配置OpenSearch集群YML文件默认参数 云搜索服务支持用户修改“opensearch.yml”文件,该文件是OpenSearch的配置文件,用于设置和管理OpenSearch集群的各种参数和行为。通过合理配置YML参数,可以优化集群的性能,提高系统的稳定性和安全性。 配置YML文件