检测到您已登录华为云国际站账号，为了您更好的体验，建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
检测到您已登录华为云国际站账号，为了您更好的体验，建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
Elasticsearch集群数据迁移方案介绍 表1 Elasticsearch集群迁移方案 迁移场景 迁移工具 适用场景 使用限制 场景示例 华为云Elasticsearch集群间数据迁移 华为云Logstash 适用于低版本的华为云Elasticsearch集群到高版本的数据迁移。
ash集群用于迁移Elasticsearch集群的数据。 步骤3：配置迁移任务：在Logstash集群配置Elasticsearch集群的迁移任务。 步骤4：启动迁移任务：在Logstash集群启动配置好的迁移任务。 步骤5：停止任务：当数据迁移完成，不再需要迁移任务时，您可以停止任务。
群间数据迁移仅适用于源集群和目标集群都是CSS服务的集群。常用于以下场景： 跨地域或跨账号迁移：将其他Region或账号下的Elasticsearch集群迁移到当前集群中。 集群合并：将两个Elasticsearch集群的索引数据合并到一个集群中。 方案架构 图1 迁移流程 通过
Elasticsearch数据迁移 Elasticsearch集群数据迁移方案介绍 通过华为云Logstash实现Elasticsearch集群间数据迁移 通过备份与恢复实现华为云Elasticsearch集群间数据迁移 通过S3插件备份与恢复迁移自建Elasticsearch集群至华为云
配置Logstash迁移任务 创建Logstash配置文件 启动Logstash迁移任务 停止Logstash迁移任务 Logstash配置文件模板介绍 父主题： 使用Logstash迁移数据
日志和事件监控：收集和分析大量日志数据，实时监控系统状态和安全事件。 医疗健康记录：快速检索和分析患者记录，支持临床决策和研究。 方案架构 图1 Elasticsearch加速关系型数据库的方案架构 用户业务数据存储到MySQL。 通过数据复制服务DRS将MySQL中的数据实时同步到CSS服务的Elasticsearch集群。
ticsearch。 根据业务需求，可以选择全量数据迁移或增量数据迁移。 全量数据迁移：使用Logstash进行全量数据迁移，适用于迁移初期或需要确保数据完整性的场景。 增量数据迁移：通过Logstash配置增量查询，可以只迁移有增量字段的索引数据。此方法适用于需要持续同步数据或对数据实时性有较高要求的场景。
技术栈统一：当企业已经在华为云上运行其他服务时，为了技术栈的统一和简化管理，可以选择将Elasticsearch集群也迁移至华为云。 方案架构 图1 迁移流程 通过备份与恢复迁移第三方Elasticsearch集群（源集群）至华为云Elasticsearch集群（目标集群）的迁移流程如图1所示。
是否支持跨Region迁移CSS集群？ 在CSS服务中，关于Elasticsearch集群的跨区域迁移，可以通过以下方法实现： 如果OBS桶在同一个区域，请参考备份与恢复索引进行集群迁移。 如果OBS桶跨区域，请先参考配置跨区域复制进行跨区域复制OBS桶，再参考备份与恢复索引进行集群迁移。 在跨
快数据同步速度。待数据迁移完成后，再修改为实际值。 当源端数据量很大时，建议采用快照方式迁移数据。例如通过备份与恢复实现华为云Elasticsearch集群间数据迁移、通过S3插件备份与恢复迁移自建Elasticsearch集群至华为云和通过备份与恢复迁移第三方Elasticsearch集群至华为云。
h。 方案优势 跨版本兼容性高：支持在不同版本的Elasticsearch集群之间进行数据迁移，包括从低版本到高版本的升级。 高可用性和持久性：S3提供的高持久性和可用性保证了备份数据的安全性，减少了数据丢失的风险。 灵活的备份策略：可以根据业务需求，灵活选择全量备份或增量备份，优化存储使用和迁移时间。
望更换服务提供商至华为云。 方案架构 图1 迁移流程 通过Reindex API实现Elasticsearch集群间数据迁移的迁移流程如图1所示。 在Linux虚拟机上安装ESM迁移工具。 通过ESM迁移命令，将源集群的索引数据迁移至目标集群。 方案优势 跨版本兼容性：ESM支持
热停止pipeline迁移数据 功能介绍 该接口用于热停止pipeline迁移数据。 调用方法 请参见如何调用API。 URI POST /v1.0/{project_id}/clusters/{cluster_id}/lgsconf/hot-stop 表1 路径参数 参数 是否必选
rch集群间数据迁移。通过华为云Logstash可以实现华为云Elasticsearch、自建Elasticsearch或第三方Elasticsearch迁移至华为云Elasticsearch。 通过备份与恢复实现Elasticsearch集群间数据迁移 通过备份与恢复实现华为云
s/sec”即查询吞吐量QPS。 图2 测试结果示例 性能测试比较 以下测试方案只列出了对比项的参数值，未列举的参数建议保持默认值。 GRAPH类索引 百万规模的场景推荐使用GRAPH索引类型。 测试方案一：使用不同维度的数据集，在Top10召回率均达到99%的情况下，测试向量数
款休闲裤女装","size":"S"} ] } 视频介绍 操作流程 以下是使用Elasticsearch集群完成数据搜索的操作步骤。 开始迁移数据前，请务必按准备工作指导完成必要操作。 步骤1：创建集群：创建一个Elasticsearch非安全集群用于搜索数据。 步骤2：导入数据
Elasticsearch，以便在数据丢失或损坏时快速恢复。 方案架构 图1 RDS MySQL数据同步至Elasticsearch 使用Logstash将RDS MySQL数据同步至Elasticsearch的方案流程如图1所示。 在CSS服务的Logstash中通过默认插件l
Generation）的知识问答系统。针对NLP大模型存在的知识幻觉、知识更新不及时以及缺乏企业专业知识等问题，大模型+知识库是当前普遍采用的解决方案。 KooSearch基于RAG架构，支持导入非结构化或结构化的业务数据到知识库，帮助企业客户快速、一站式地搭建企业智能问答应用。通过搜索
创建Logstash配置文件 Logstash集群通过配置文件定义迁移方案，从不同的数据源（input）迁移数据到不同的目的端（output）。 约束限制 创建的配置文件大小不能超过100k。 Logstash集群允许最多配置50个配置文件，最多可以同时存在5个“状态”为“校验中”的配置文件。
配置Logstash集群路由 配置Logstash迁移任务 通过Logstash集群的配置中心，可以创建并启动Logstash配置文件，以实现数据从不同数据源到目的端的迁移。 创建Logstash配置文件 启动Logstash迁移任务 运维 扩缩容 CSS服务提供灵活的扩容和缩容
长按/截图保存，微信识别二维码
或者关注公众号“华为云”
