MAPREDUCE服务 MRS-MRS 3.1.2-LTS.2补丁说明:MRS 3.1.2-LTS.2.14补丁基本信息

时间:2024-08-17 08:59:29

MRS 3.1.2-LTS.2.14补丁基本信息

补丁号

MRS 3.1.2-LTS.2.14

发布时间

2023-10-27

安装前处理

如果MRS集群节点故障或者网络不通,需要先隔离该节点,否则补丁会安装失败。

新特性和优化

MRS Manager

  • MRS客户端管理功能增强,客户端管理支持给客户端打补丁。
  • MRS支持运维巡检通道。
  • MRS服务集成StoreWorker/StoreMaster滚动重启,Manager新增滚动重启策略。

解决的问题

MRS 3.1.2-LTS.2.14修复问题列表:

  • MRS Manager
    • 解决备oms节点上报fms资源异常告警的问题。
    • 解决扩容失败HOSTS_OS_PATCH_STATE表IP残留导致后续扩容失败的问题。
    • 解决 CES 监控和Yarn上监控对不上的问题。
    • 解决 OMS 频繁主备倒换的问题。
    • 解决查看指定时间段内主机资源概况,监控数据为空,查看失败的问题。
    • 解决磁盘监控指标计算不正确的问题。
  • 大数据组件
    • 解决Yarn的ResourceManager频繁主备倒换的问题
    • 解决Yarn的NodeManager健康检查太敏感的问题
    • 解决Yarn健康检查误采集备节点健康状态,导致上报服务不可用告警的问题
    • 解决Ldapserver数据不同步的问题
    • 解决安装MRS 3.1.2-LTS.2.6补丁后Hive执行失败的问题
    • 解决HiveServer连接Guardian线程泄漏的问题
    • 解决Hive列值过长写入ORC文件失败的问题
    • 解决Hive异常任务失败(含失败、异常终止等状态)后临时文件清理较慢的问题
    • 解决Hive配置外置元数据,导致hive启动失败的问题
    • 解决Hive的hiveserver.out日志不压缩,导致/var/log/占满的问题
    • 解决Hive分区表增加字段时间长的问题
    • 解决rand函数在0-1直接的随机数字串只能生成0.72左右的问题
    • 解决Hive的WebHcat进程kill后,无法自拉起,无告警上报的问题
    • 解决Kafka在kerberos认证失败之后自动重启存在异常的问题
    • 解决Hudi和Spark目录下的Spring包不兼容的问题
    • 解决Zookeeper配置了配额仍然显示设置顶层配额失败的告警的问题
    • 解决老Guardian实例日志需要打印客户端IP的问题
    • 解决MemArtsCC使用TPCDS测试套写10TB数据,任务运行中,cc-sidecar不断重启的问题
    • 解决MemArtsCC裸机环境长稳运行中,cc-sidecar进程故障的问题
    • 解决存算分离场景下Spark作业失败时残留文件需要快速清理的问题
    • 解决Spark打印ERROR日志的问题
    • 解决Spark的JobHistory进程挂起,不自愈,且无告警上报的问题
    • 解决Spark开启推测执行加载分区为null的问题
    • 解决Spark的JD BCS erver进程注入进程Z状态故障、故障注入期间进程不自愈、无进程异常告警、Spark任务已提交失败、无Spark应用不可用告警的问题
    • 解决Spark的JDBC进程kill后,7min自愈,且无告警上报,存在可靠性风险的问题
    • 解决Spark的JDB CS erver进程挂起,进程不自愈,且无告警上报,spark应用提交失败的问题
    • 解决Spark停止JDBCServer实例无事件上报,JDBCServer.log里有上报事件失败的warn的问题
    • 解决安装2.10补丁之后Spring的包冲突导致部分Spark作业无法运行的问题
    • 解决Spark的JobHistory进程z状态后,进程异常消失,不自愈,且无告警上报,存在可靠性风险的问题
    • 解决Spark的JobHistory进程kill后,5min自愈,且无告警上报的问题
    • 解决Spark2x切换补丁未替换Spark服务端Jar包的问题
    • 解决Spark写入eventlog失败的问题

补丁兼容关系

MRS 3.1.2-LTS.2.14补丁包中包含所有MRS 3.1.2-LTS.2版本单点问题修复补丁。

support.huaweicloud.com/usermanual-mrs/mrs_01_9043.html