检测到您已登录华为云国际站账号,为了您更好的体验,建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
次增量迁移过程中需要修改此处的日志值,如果日期是时间戳方式请转换为时间戳。此处命令需要提前验证有效性。 scroll 当源端数据量过大,为了防止Logstash内存溢出,可以使用scroll分批次获取数据。默认为"1m"。间隔时间不要太长,否则可能会丢失数据。 启动增量迁移任务。
数据迁移过程中,系统会把待下线节点中的所有数据分片移动到剩余节点,待数据迁移完成后再进行节点下线操作。当待下线节点上的数据在剩余节点存在副本时,可跳过数据迁移,缩短集群变更时间,减少数据迁移带来的负载压力。 单击“返回集群列表”跳转到集群管理页面。集群的“任务状态”列中显示为“缩容中”,表示集群正在缩容。当集群状态变为“可用”,则表示缩容成功。
数据迁移过程中,系统会把待下线节点中的所有数据分片移动到剩余节点,待数据迁移完成后再进行节点下线操作。当待下线节点上的数据在剩余节点存在副本时,可跳过数据迁移,缩短集群变更时间,减少数据迁移带来的负载压力。 单击“返回集群列表”跳转到集群管理页面。集群的“任务状态”列中显示为“缩容中”,表示集群正在缩容。当集群状态变为“可用”,则表示缩容成功。
操作类型。 confContent String 配置文件内容。 status String 操作状态。 updateAt String 更新时间,格式为ISO8601:CCYY-MM-DDThh:mm:ss。 errorMsg String 错误信息。当操作状态为success时该字段为null。
通常更有效,但会增加内存开销,默认为125。 batchDelayMs 否 Integer 每个event被pipeline调度等待的最小时间。 单位毫秒。 queueType 是 String 用于事件缓冲的内部队列模型。memory为基于内存的传统队列,persisted为基
通常更有效,但会增加内存开销,默认为125。 batchDelayMs 否 Integer 每个event被pipeline调度等待的最小时间。 单位毫秒。 queueType 是 String 用于事件缓冲的内部队列模型。memory为基于内存的传统队列,persisted为基
shard lock]” 这种情况一般出现在有节点短暂离开集群,然后马上重新加入,并且有线程正在对某个shard做bulk或者scroll等长时间的写入操作,等节点重新加入集群的时候,由于shard lock没有释放,master无法allocate这个shard。 参考•shardlock错误
集群不可用排查指导 问题现象 云搜索服务的集群列表中,“集群状态”出现“不可用”。 图1 集群不可用 原因分析及处理方法 如果集群列表的任务状态显示“冻结”,可能是集群冻结状态导致集群不可用。 如果集群列表的任务状态显示“配置错误,重启失败”,可能是X-pack参数配置导致集群不可用。
如何查看CSS集群的分片数以及副本数? 登录云搜索控制台。 在集群管理页面,选择需要查看的集群操作列的Kibana。 登录Kibana界面,选择Dev Tools。 在Dev Tools的Console界面中执行GET _cat/indices?v命令,查询集群分片数和副本数。如
停止Logstash迁移任务 场景描述 在Logstash集群停止Logstash迁移任务有两种方式。 全部停止:在管道列表中,同时停止所有任务。停止成功后,管道“运行状态”变成“已停止”。 热停止:在管道列表中,一次只能停止一个管道任务。停止成功后,该管道任务会直接从管道列表中移除。
高可用性和持久性:S3提供的高持久性和可用性保证了备份数据的安全性,减少了数据丢失的风险。 灵活的备份策略:可以根据业务需求,灵活选择全量备份或增量备份,优化存储使用和迁移时间。 性能影响 使用备份与恢复迁移集群的核心在于直接复制数据存储层的文件以实现数据备份,该方案避免了对Elasticsearch外部读写接口
Extra主词词库库文件对象 extraStopObj String 参数解释: Extra停词词库对象 updateTime String 参数解释: 词库最近更新时间。 updateDetails String 参数解释: 更新详情。 clusterId String 参数解释: 指定配置自定义词库的集群ID。
由于ESM能够迅速从源集群读取数据,可能会对源集群的性能产生影响。因此,建议在业务低峰时段进行数据迁移,以监控源集群CPU和内存的性能指标变化。通过调整迁移速度和选择适宜的迁移时间窗口,可以有效控制性能影响。对于涉及大量数据迁移或资源占用较高的集群,特别推荐在业务低峰期执行数据迁移,以确保源端业务操作不受影响。 约束限制
启动Logstash迁移任务 场景描述 使用Logstash集群启动Logstash迁移任务的操作流程: 测试数据源和目的端与Logstash集群之间的网络连通性,确保数据传输畅通:测试连通性 通过启动配置文件启动Logstash迁移任务。 当管道列表没有“工作中”的任务时,则启动配置文件。
获取项目ID和名称 在调用接口的时候,部分请求中需要填入项目ID(project_id)或项目名称(project name),所以需要获取到项目ID和名称。 从控制台获取项目ID和名称 登录管理控制台。 在页面右上角单击用户名,在下拉列表中单击“我的凭证”,进入“API凭证”页面。
删除Logstash集群 当用户已完成Logstash数据迁移业务,无需继续使用某一集群时,可删除集群释放资源。 约束限制 删除集群时,会清理集群业务数据,请谨慎操作。 删除按需计费的集群 登录云搜索服务管理控制台。 在左侧导航栏,选择对应的集群类型,进入集群列表界面。 在对应集群的“操作”列中单击“更多>删除”。
云搜索服务的包周期资源如何续费? 云搜索服务支持按年按月续费资源,具体续费操作如下: 已有集群时如何续费 如果是已经建好的包周期集群,需要续订包周期,可以执行如下步骤: 在云搜索服务的集群管理列表页,找到需要续订的计费模式为“包年/包月”的集群。 单击操作列的“更多 > 续费”,确定后进入续费页面。
-d10m -s perf.lua http://x.x.x.x:9200 “t”表示压测线程数。 “c”表示与服务端的连接数。 “d”表示压测时间,“10m”表示10分钟 。 “s”表示Wrk的压测配置脚本。 “x.x.x.x”表示Elasticsearch集群的访问地址。 在回显中
z” 400 CSS.5020 Invalid automated backup start time. 自动备份开始时间不合法。 请根据接口参数描述,设置合法备份时间。 400 CSS.5021 The VPC does not exist or does not belong to
通过Curl命令行接入OpenSearch集群 开源Elasticsearch提供了一系列RESTful风格的API,通过Curl命令可以在Kibana、Postman等工具中使用这些API。本文介绍如何通过Curl命令接入Elasticsearch和OpenSearch集群。 前提条件