检测到您已登录华为云国际站账号,为了您更好的体验,建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
Logstash接口 创建配置文件 更新配置文件 启动pipeline迁移数据 停止pipeline迁移数据 添加到自定义模板 连通性测试 查询模板列表 查询配置文件列表 查询pipeline列表 查询操作记录 查询配置文件内容 删除配置文件 删除自定义模板 热启动pipeline迁移数据
语的集合。 词库文件必须是UTF-8无BOM格式编码的文本文件,一行一个分词,停词文件最大支持100M。 同义词词库 同义词为意义相同的一组词语,例如“开心”和“高兴”。同义词词库是用户自定义的同义词词语的集合。 词库文件必须是UTF-8无BOM格式编码的文本文件,一行一组同义词
在配置中心界面,单击右上角“创建”,进入创建配置文件页面,编辑配置文件。 图7 配置任务 表5 创建配置文件参数说明 参数 说明 取值样例 名称 自定义配置文件名称。 只能包含字母、数字、中划线或下划线,且必须以字母开头。必须大于等于4个字符。 es-es 配置文件内容 展开上方“系统模板”,选择
语的集合。 词库文件必须是UTF-8无BOM格式编码的文本文件,一行一个分词,停词文件最大支持100M。 同义词词库 同义词为意义相同的一组词语,例如“开心”和“高兴”。同义词词库是用户自定义的同义词词语的集合。 词库文件必须是UTF-8无BOM格式编码的文本文件,一行一组同义词
String 参数解释: 最近一次更新存放词库文件的OBS桶。 mainObj String 参数解释: 主词词库文件对象。 stopObj String 参数解释: 停词词库文件对象。 synonymObj String 参数解释: 同义词词库文件对象。 staticMainObj String
String 配置文件id。 name String 配置文件名称。 confContent String 配置文件内容。 desc String 描述。 表5 customTemplates 参数 参数类型 描述 id String 配置文件id。 name String 配置文件名称。 confContent
keystore”结尾,可以包含字母、数字、中划线、下划线或者小数点,不能包含其他的特殊字符。 证书上传数量不超过50个。 证书文件大小不能超过1M。 登录对象存储服务管理控制台,将自定义证书上传至OBS桶,具体操作请见上传文件。 登录云搜索服务管理控制台。 在左侧导航栏选择“集群管理 > Logstash”,进入集群列表页面。
创建配置文件页面,编辑Elasticsearch集群的全量迁移配置文件。 选择集群模板:展开系统模板,选择“elasticsearch”,单击操作列的“应用”。 设置配置文件名称:在“名称”处自定义配置文件名称,例如“es-es-all”。 修改配置文件内容:在“配置文件内容”处
listTemplates 查询配置文件列表 cluster listConfs 查询Pipeline列表 cluster listPipelines 查询操作记录 cluster listActions 查询配置文件内容 cluster showGetConfDetail 删除配置文件 cluster
配置Logstash迁移任务 创建Logstash配置文件 启动Logstash迁移任务 停止Logstash迁移任务 Logstash配置文件模板介绍 父主题: 使用Logstash迁移数据
oracle.com/technetwork/java/javase/downloads/jdk8-downloads-2133151.html。 引入Java依赖: 其中7.6.2为Elasticsearch Java客户端的版本号。 <dependency> <groupId>org
由于Elasticsearch和OpenSearch集群默认使用本地存储,底层的Lucene索引文件存储在本地磁盘,Lucene通过Directory接口与底层存储进行交互,通过以下接口可以读取文件。 public abstract IndexInput openInput(String
查询模板列表 该接口用于查询模板列表。 查询配置文件列表 查询配置文件列表。 查询pipeline列表 该接口用于查询pipeline列表。 查询操作记录 该接口用于查询操作记录。 查询配置文件内容 该接口用于查询配置文件内容。 删除配置文件 删除配置文件。 删除自定义模板 该接口用于删除自定义模板。
命令创建keystore文件。 bin/elasticsearch-keystore create s3.keystore 创建keystore文件必须用普通用户,不能用root账号,否则配置不生效。 将华为云的访问密钥AK/SK增加到keystore文件中。 bin/elasticsearch-keystore
恢复过程可控:在恢复数据时,可以选择恢复特定索引或全部索引,并且可以指定恢复到特定的集群状态。 性能影响 使用备份与恢复迁移集群的核心在于直接复制数据存储层的文件以实现数据备份,该方案避免了对Elasticsearch外部读写接口的依赖,从而显著降低了对源集群性能的影响。对于对业务延迟要求不严苛的集
指定恢复到特定的集群状态。 迁移时长可控:基于迁移时长评估公式可以配置数据迁移速率,理想状态下等于文件复制速率。 性能影响 使用备份与恢复迁移集群的核心在于直接复制数据存储层的文件以实现数据备份,该方案避免了对Elasticsearch外部读写接口的依赖,从而显著降低了对源集群性
是 String 指定待操作的集群ID。 请求参数 表2 请求Body参数 参数 是否必选 参数类型 描述 name 是 String 配置文件名称。 keep_alive 否 Boolean 热启动操作时,需要与集群已存在管道的 “是否保持常驻”值保持一致。 true: 开启保持常驻。
当需要停止管道列表中全部配置文件的数据迁移任务时,单击管道列表上方的“全部停止”。 根据对话框提示,单击“确定”,停止所有管道的数据迁移任务。 全部停止成功则可以看到管道列表所有任务均停止,且全部管道数据迁移中断。 热停止某个迁移任务 当需要停止管道列表中某一个配置文件的数据迁移任务时,勾选管道,单击管道列表上方的“热停止”。
30, // 总文件数 "success" : 30, // 成功文件数 "incremental" : 0, // 多次执行时,部分文件可能已经处于归档状态,此字段标识这样的文件个数 "bytes" : 0, // 所有文件字节数,只有恢复归档索引时才会有该值
的数据迁移? 是否支持跨Region迁移CSS集群? 使用CSS Logstash迁移Elasticsearch集群的Logstash配置文件样例