MRS 3.2.0-LTS.1.9补丁说明-华为云

MAPREDUCE服务 MRS-安装补丁:修改配置

修改配置 MRS _3.2.0-LTS.1.6以及之后补丁，Spark支持视图表权限控制，开启方法（若之前有设置过，则跳过）：在JD BCS erver的自定义custom参数添加spark.ranger.plugin.viewaccesscontrol.enable值为true，并添加参数spark.ranger.plugin.viewaccesscontrol.enable=true到客户端目录下“Spark2x/spark/conf/spark-defaults.conf”配置文件中，重启JDB CS erver实例。 MRS_3.2.0-LTS.1.6以及之后补丁，Spark支持子查询字段不带聚合函数语法，开启方法（若之前有设置过，则跳过）：在JDBCServer的自定义custom参数添加spark.sql.legacy.correlated.scalar.query.enabled参数值为true，并添加参数spark.sql.legacy.correlated.scalar.query.enabled=true到客户端目录下“Spark2x/spark/conf/spark-defaults.conf”配置文件中，重启JDBCServer实例。

MAPREDUCE服务 MRS MRS 3.2.0-LTS.1.9补丁说明

MAPREDUCE服务 MRS-安装补丁:安装补丁

安装补丁登录MRS管理控制台。选择“现有集群”，选中一集群并单击集群名，进入集群基本信息页面。进入“补丁管理”页面，在操作列表中单击“安装”。进入“警告”页面，阅读补丁说明，并单击“确定”。图1 安装补丁请确保集群允许root登录，并且所有节点的root密码一致。如果任务失败，选择“重试安装”，只有当“状态”显示为“已安装”时，才能进入下一步操作。升级安装失败或者重试后仍然失败，不能直接回滚，请联系运维人员。

MAPREDUCE服务 MRS MRS 3.2.0-LTS.1.9补丁说明

MAPREDUCE服务 MRS-安装补丁前必读:安装补丁过程中对现行系统的影响

安装补丁过程中对现行系统的影响安装补丁过程中会重启 OMS ，会导致MRS Manager页面无法访问，预计持续10-20分钟。安装补丁过程中会影响弹性伸缩以及MRS Manager上正在运行的任务，升级前请确认已经关闭弹性伸缩，并且MRS Manager上没有正在运行的任务。安装补丁过程中，不允许在作业管理页面提交作业。安装补丁过程包括组件重启，支持滚动重启和离线重启，请选择合适的方法。重启过程不能省略。补丁安装后操作不能省略，若没有执行此操作，会影响Spark、HDFS、Flink等组件的补丁生效，会导致Spark client模式的作业运行失败。

MAPREDUCE服务 MRS MRS 3.2.0-LTS.1.9补丁说明

MAPREDUCE服务 MRS-补丁安装后操作:升级HDFS上组件的zip包

升级HDFS上组件的zip包登录集群主节点并执行以下命令： su - omm cd /opt/Bigdata/patches/{MRS补丁版本号}/client/ source /opt/Bigdata/client/bigdata_env 所有涉及{MRS补丁版本号}目录名称的操作，均以实际安装的补丁号为准。例如： cd /opt/Bigdata/patches/MRS 3.2.0-LTS.1.9/client/ 安全集群需要认证对HDFS有权限的用户，普通集群无需执行： kinit {用户} 执行以下命令升级HDFS上的zip包： sh update_hdfs_file.sh 升级完成后需要在 FusionInsight Manager界面上重启Spark的JDBCServer2x实例。

MAPREDUCE服务 MRS MRS 3.2.0-LTS.1.9补丁说明

MAPREDUCE服务 MRS-补丁安装后操作:升级客户端

升级客户端如果有使用自主安装的客户端（集群内、外新下载客户端），需要执行客户端升级操作。登录集群主节点并执行以下命令： cd /opt/Bigdata/patches/{MRS补丁版本号}/download/ 将补丁安装包拷贝到客户端机器/opt/目录下： scp patch.tar.gz {客户端机器IP}:/opt/ 例如： scp patch.tar.gz 127.0.0.1:/opt/ 登录客户端所在节点。执行以下命令创建补丁目录并解压补丁包： mkdir /opt/{MRS补丁版本号} tar -zxf /opt/patch.tar.gz -C /opt/{MRS补丁版本号} 执行客户端补丁升级。登录客户端所在节点，并执行以下命令： cd /opt/{MRS补丁版本号}/client sh upgrade_client.sh upgrade {客户端安装目录} 例如： sh upgrade_client.sh upgrade /opt/client/

MAPREDUCE服务 MRS MRS 3.2.0-LTS.1.9补丁说明

MAPREDUCE服务 MRS-补丁基本信息说明

补丁基本信息说明表1 补丁基本信息补丁号 MRS 3.2.0-LTS.1.9 发布时间 2024-06-30 解决的问题 MRS 3.2.0-LTS.1.9修复问题列表：解决HetuEngine查询gauss date字段报错的问题。解决HetuEngine计算实例在Yarn上启动失败的问题。解决HetuEngine CN主备倒换，计算实例状态短暂变成ERROR导致业务失败问题。支持ClickHouse备份到OBS。解决ClickHouse物化视图的基表中添加列，报OOM的问题。解决ClickHouse Mysql引擎偶现卡顿问题（root补丁修复）。解决ClickHouse内存暴涨后出现停止响应的问题。解决修改ClickHouse配置时nodeagent会增加Zookeeper连接，旧连接不会释放导致Zookeeper不可用的问题。解决ClickHouse偶现内置clickhouse用户多次认证失败，用户被锁，导致服务不可用的问题。解决调用MRS的作业管理接口API，返回的Spark日志的url和实际不一致的问题。解决Spark JDBCServer切换成多实例模式后shuffle数据会不断累积，导致磁盘被打满的问题。解决Spark InsertOverwrite数据不一致问题。解决Superior调度器分配资源到用户时有可能会卡顿问题。解决Yarn扩容导致性能劣化问题。解决Yarn RETS API获取各个队列的资源反馈结果为0的问题。解决Yarn RETS API并发查询队列详情的接口偶现查询结果为0的问题。解决管控面提交Flink作业打印敏感日志的问题。解决Hudi到DWS任务unknown以及无法删除问题。解决Hudi filegroup下只有一个4bytes文件时，Hudi读写报错的问题。解决CDL定时线程增加异常保护，防止线程异常，告警不上报的问题。解决CDL解密环境变量冲突，导致升级时hudi源任务运行失败的问题。解决删除CDL作业后，数据库表CDC_JOB_EXECUTION中仍存在该作业名的问题。解决CDL时间函数clock_timestamp()导致Hudi-Dws压测性能下降的问题。解决Flink create view的select语句包含JTL/TTL hints，不生效的问题。解决Flink lookup join cow表，作业启动后缓存过期，重新加载不到数据，join无输出的问题。解决[FLINK-27247]问题。解决Flink通过代理用户访问普通集群Hive失败问题。解决磁盘不可用告警无具体盘符问题。解决阈值告警平滑次数偶现不生效，导致阈值告警频繁上报的问题。解决 GaussDB 健康检查异常，导致实例重启问题（root补丁修复）。解决GaussDB异常时，acs无自恢复能力的问题。解决Agent重启会上报大量服务不可用告警的问题。解决备OMS节点，主机重启后，knox进程无法自启动的问题。解决DBServer频繁主备倒换的问题。解决Hive MetaStore黑名单机制在并发场景下会出现空指针的问题。解决HDFS 3个AZ每个AZ下2个NodeManager实例，缩容一个NodeManager后，此AZ持续报AZ不健康的问题。解决HDFS多AZ场景NameNode的选副本逻辑问题导致rpc时间变长问题。解决Hue服务不可用告警误报问题。补丁兼容关系 MRS 3.2.0-LTS.1.9补丁包中包含所有MRS 3.2.0-LTS.1版本单点问题修复补丁。父主题： MRS 3.2.0-LTS.1.9补丁说明

MAPREDUCE服务 MRS MRS 3.2.0-LTS.1.9补丁说明

云服务器内容精选

MRS 3.2.0-LTS.1.9补丁说明

7*24

备案

专业服务

退订

建议反馈

售前咨询热线