MRS补丁说明-华为云

MAPREDUCE服务 MRS-MRS 3.2.0-LTS.1补丁说明:MRS 3.2.0-LTS.1.1补丁基本信息

MRS 3.2.0-LTS.1.1补丁基本信息表7 补丁基本信息补丁号 MRS 3.2.0-LTS.1.1 发布时间 2023-04-07 安装前处理如果MRS集群节点故障或者网络不通，需要先隔离该节点，否则补丁会安装失败。解决的问题 MRS 3.2.0-LTS.1.1 修复问题列表：解决Hudi性能优化，增加优化参数控制同步Hive schema问题解决Hudi表包含decimal字段做ddl变更时，执行clustering报错问题解决MRS 3.1.2版本创建的hudi bucket索引表，在升级后compaction作业失败问题解决Table can not read correctly when computed column is in the midst问题解决Hudi的schema evolution和历史版本不兼容问题解决Fink无法读取低版本Spark用bulk insert方式写入的timestamp类型数据的精度问题解决mor表delete数据，下游Flink读任务失败问题解决Flink流写mor开启同步compaction，包含decimal列，Spark添加一列后重启作业，触发compaction执行失败问题解决Flink写mor表同时sparksql查询，当Flink触发clean后，Spark查询失败问题解决mor表有rollback，执行cleanData后Flink schedule生成计划，spark run compaction报空指针问题解决Flink进行批量作业时权限不足导致作业失败问题解决Flink指定timestamp读Kafka异常的问题解决Flink写历史版本创建的bucket索引hudi表，索引数据错乱重复fileid问题解决Flink On HBase当条件为null时，使用错误下推Filter导致漏数问题解决Flink on hudi解析的时间范围如果超过2262-04-11 23:47:16，则会解析失败，报错overflow问题解决Spark/Flink写Hudi表，控制归档文件大小的参数不生效问题解决Spark任务，有多个ddl语句(drop，truncate，create)长时间执行不结束问题解决Spark建mor表带timestamp，Flink流读数据有误，相差8h问题解决cow/mor表执行完drop partition后，首次执行delete报错，堆栈异常问题解决datasource写Hudi表名和同步的Hive表明不一致，写入失败，sql写location指定到一个存量cow表目录，表名不一致，insert成功的问题 CDL链路hudi-dws性能优化解决CDL升级后业务用户未添加hadoop组，任务启动失败问题解决CDL hudi-dws链路配置max.commit.number参数时，偶现同步数据丢失问题解决当CDL存在连接源端库失败的作业，task线程泄漏，导致作业启动超时问题解决CDL Hudi connector代码中增加hoodie.datasource.hive_sync.skip_sync_schema参数，默认为true，优化元数据同步性能，减少性能毛刺问题解决CDL读Hudi表出现404失败，找不到rollback.requested问题解决CDL Task阻塞导致所有任务Task失败问题解决Yarn的jdbcserver资源超长时间不释放问题补丁兼容关系 MRS 3.2.0-LTS.1.1补丁包中包含所有MRS 3.2.0-LTS.1版本单点问题修复补丁。安装补丁的影响请参考安装补丁的影响。

MAPREDUCE服务 MRS MRS补丁说明

MAPREDUCE服务 MRS-MRS 3.2.0-LTS.1补丁说明:MRS 3.2.0-LTS.1.2补丁基本信息

MRS 3.2.0-LTS.1.2补丁基本信息表6 补丁基本信息补丁号 MRS 3.2.0-LTS.1.2 发布时间 2023-05-10 安装前处理如果MRS集群节点故障或者网络不通，需要先隔离该节点，否则补丁会安装失败。解决的问题 MRS 3.2.0-LTS.1.2 修复问题列表：解决Manager无法创建带点字符用户问题解决 IAM 同步的用户组无法添加Manager页面上创建的用户问题解决夏令时时间下组件 on obs功能不可用问题解决在Manager页面创建备份任务到obs时参数校验异常问题解决通过API接口提交Spark作业时的日志打印问题解决修改ClickHouse索引列导致进程重启问题解决在Manager页面租户管理中动态资源计划显示异常问题解决修改Clickhouse配置时创建的Zookeeper连接不释放问题解决在Manager页面ClickHouse组件修改角色添加数据库的create权限，导致已有表的自定义权限丢失问题补丁兼容关系 MRS 3.2.0-LTS.1.2补丁包中包含所有MRS 3.2.0-LTS.1版本单点问题修复补丁。安装补丁的影响请参考安装补丁的影响。

MAPREDUCE服务 MRS MRS补丁说明

MAPREDUCE服务 MRS-MRS 3.2.0-LTS.1补丁说明:MRS 3.2.0-LTS.1.4补丁基本信息

MRS 3.2.0-LTS.1.4补丁基本信息表4 补丁基本信息补丁号 MRS 3.2.0-LTS.1.4 发布时间 2023-10-16 安装前处理如果MRS集群节点故障或者网络不通，需要先隔离该节点，否则补丁会安装失败。新特性支持在Hue WebUI中使用HetuEngine SQL编辑器。运维巡检工具查询优化。解决的问题 MRS 3.2.0-LTS.1.4修复问题列表：解决Flink读MySQL作业出现的类冲突问题解决Flink Server提交SQL作业时解码异常错误解决 DataArts Studio 提交Flink SQL作业报StackOverflow错误解决普通集群使用RestA调用FlinkServer的jobs/action时报错解决Flink客户端不支持-yD或-D配置keytab和principal的问题解决HetuEngine查询Flink写入的HudiMOR表数据为空的问题解决HetuEngine对Hudi的bucket索引mor表和mor_rt表查询失败问题解决HetuEngine查询Hive的LZ4压缩格式数据失败问题解决HetuEngine查询Hudi的OBS表失败问题解决HetuEngine多hashkey时，查询条件包含单个hashkey时，无法查出结果的问题解决Hudi数据源add columns/drop columns之后Hetu查询失败的问题解决Hudi在replacement场景下无法正常归档文件问题解决Hudi在InternalSchema转AvroSchema未去掉元字段导致流任务更新数据失败问题解决Hudi版本升级后出现Spark读hudi表和run compaction失败问题解决Hudi SQL执行call run_clustering_Mor后，rt/ro表的log数据丢失问题解决Hudi ro表compaction期间数据查询不出来问题解决Hudi表带decimal字段做ddl变更，在执行clustering报错问题解决Hudi Cow/mor表执行完drop partition后，首次执行delete报堆栈异常的问题解决Hive on Tez查询Hudi的schema演进表报错，需要适配默认InputFormat切分方式问题解决Spark/Flink写Hudi表，控制归档文件大小的参数不生效的问题解决Hudi mor表，log中1900前的timestamp数据错误问题解决HetuEngine查询Hudi数据重复问题解决Manager中12小时以上监控数据无法导出的问题解决Manager中节点磁盘使用率和磁盘读速率无法显示一周数据的问题解决弹性伸缩场景下操作更新集群拓扑时，全表查询TBL_HISTORY_TOPO LOG Y导致controller触发OOM问题解决弹性伸缩过程中出现Metaspace内存不足触发agent重启的问题解决弹性伸缩场景下OMA进程异常无法采集指标，导致扩缩容任务异常问题解决大集群中监控数据丢失问题解决Manager AD对接后同步用户失败问题解决集群配置ranger元数据外置后RangerAdmin实例启动失败问题对接LakeFormation，policysync同步策略失败整改解决Spark JDBC模式执行插入耗时过久的问题解决Hudi-Connector支持bucket裁剪性能优化问题补丁兼容关系 MRS 3.2.0-LTS.1.4补丁包中包含所有MRS 3.2.0-LTS.1版本单点问题修复补丁。安装补丁的影响请参考安装补丁的影响。

MAPREDUCE服务 MRS MRS补丁说明

MAPREDUCE服务 MRS-MRS 3.2.0-LTS.1补丁说明:MRS 3.2.0-LTS.1.3补丁基本信息

MRS 3.2.0-LTS.1.3补丁基本信息表5 补丁基本信息补丁号 MRS 3.2.0-LTS.1.3 发布时间 2023-08-04 安装前处理如果MRS集群节点故障或者网络不通，需要先隔离该节点，否则补丁会安装失败。新特性 Manager支持指定节点进行退服入服 MRS集群支持对接LakeFormation MRS对接LakeFormation操作指导，请参见：配置LakeFormation数据连接。 LakeFormation使用流程简介以及约束，请参见：LakeFormation使用流程简介。 Guardian新增开启accesslabel开关 Guardian支持自定义文件生成器支持添加RangerKMS实例，提供数据加密服务管控面提交FlinkSQL作业支持元数据管理解决的问题 MRS 3.2.0-LTS.1.3修复问题列表：解决Hudi修改long到string后run compaction，spark读失败问题解决Hudi修改schedule后之前的commit文件被清理，spark compaction失败问题解决Hudi表有修改列名、删除重新添加列，只进行schedule，spark compaction失败问题解决Hudi增删改列后run compaction，cdl hudi2dws作业失败报空指针问题解决Hudi写log会从文件中读schema，log越大读取越慢，影响写入效率问题解决Hudi subtasks处理数据倾斜，导致300并发的场景下部分资源闲置问题解决Hudi stg_rtd_hah_ae_t_detail_t表异步compaction失败问题解决Flink指定COMPLEX创建的hudi表，spark写失败，报KeyGenerator冲突问题解决Flink提交作业错误提示问题解决Flink作业异常退出，同一个key的数据做分区变更报NPE的问题解决Flink作业读hudi log文件报错Did not find the magic bytes at the start of block的问题解决DataArts Studio作业配置后未从上一个checkpoint重启Flink的问题解决管控面提交Spark作业长时间运行后访问obs报403问题解决CDL appid刷新错误，任务显示失败，但实际是运行中的问题解决CDL Topic Creation失败，报Topic已存在的问题解决CDL单AZ断网场景，出现作业自动停止的问题解决CDL任务一直处于正常状态，历史任务id存在失败，仍然上报告警问题解决CDL单AZ断网后，作业失败，查看appid为空，但是在yarn页面查看任务实际是存在并运行中的问题补丁兼容关系 MRS 3.2.0-LTS.1.3补丁包中包含所有MRS 3.2.0-LTS.1版本单点问题修复补丁。安装补丁的影响请参考安装补丁的影响。

MAPREDUCE服务 MRS MRS补丁说明

MAPREDUCE服务 MRS-MRS 3.2.0-LTS.1补丁说明:MRS 3.2.0-LTS.1.5补丁基本信息

MRS 3.2.0-LTS.1.5补丁基本信息表3 补丁基本信息补丁号 MRS 3.2.0-LTS.1.5 发布时间 2023-10-23 安装前处理如果MRS集群节点故障或者网络不通，需要先隔离该节点，否则补丁会安装失败。新特性支持在Hue WebUI中使用HetuEngine SQL编辑器。运维巡检工具查询优化。 Flink流读Hudi新增了对消息滞留时间和消息堆积时间的监控。解决的问题 MRS 3.2.0-LTS.1.5修复问题列表：解决Spark-JDBC偶现多租户模式下，driver端口与thriftserver端口一致冲突引发一系列问题。解决Spark空闲的SparkJDBC任务超过30分钟，没有结束，资源未释放浪费资源问题。解决HetuEngine在存散分离场景下映射方式对接OBS，查询大数据量时报错的问题。补丁兼容关系 MRS 3.2.0-LTS.1.5补丁包中包含所有MRS 3.2.0-LTS.1版本单点问题修复补丁。安装补丁的影响请参考安装补丁的影响。

MAPREDUCE服务 MRS MRS补丁说明

MAPREDUCE服务 MRS-MRS 3.2.0-LTS.1补丁说明:MRS 3.2.0-LTS.1.7补丁基本信息

MRS 3.2.0-LTS.1.7补丁基本信息表1 补丁基本信息补丁号 MRS 3.2.0-LTS.1.7 发布时间 2024-02-21 安装前处理如果MRS集群节点故障或者网络不通，需要先隔离该节点，否则补丁会安装失败。解决的问题 MRS 3.2.0-LTS.1.7修复问题列表：解决Spark子查询当做列字段执行SQL任务时Ranger鉴权报错。解决Flink写Hudi失败时，作业从checkpoint恢复失败的问题。补丁兼容关系 MRS 3.2.0-LTS.1.7补丁包中包含所有MRS 3.2.0-LTS.1版本单点问题修复补丁。安装补丁的影响请参考安装补丁的影响。

MAPREDUCE服务 MRS MRS补丁说明

MAPREDUCE服务 MRS-MRS 3.2.0-LTS.1版本补丁说明:MRS 3.2.0-LTS.1.1补丁基本信息

MRS 3.2.0-LTS.1.1补丁基本信息表8 补丁基本信息补丁号 MRS 3.2.0-LTS.1.1 发布时间 2023-04-07 安装前处理如果MRS集群节点故障或者网络不通，需要先隔离该节点，否则补丁会安装失败。解决的问题 MRS 3.2.0-LTS.1.1 修复问题列表：解决Hudi性能优化，增加优化参数控制同步Hive schema问题解决Hudi表包含decimal字段做ddl变更时，执行clustering报错问题解决MRS 3.1.2版本创建的hudi bucket索引表，在升级后compaction作业失败问题解决Table can not read correctly when computed column is in the midst问题解决Hudi的schema evolution和历史版本不兼容问题解决Fink无法读取低版本Spark用bulk insert方式写入的timestamp类型数据的精度问题解决mor表delete数据，下游Flink读任务失败问题解决Flink流写mor开启同步compaction，包含decimal列，Spark添加一列后重启作业，触发compaction执行失败问题解决Flink写mor表同时sparksql查询，当Flink触发clean后，Spark查询失败问题解决mor表有rollback，执行cleanData后Flink schedule生成计划，spark run compaction报空指针问题解决Flink进行批量作业时权限不足导致作业失败问题解决Flink指定timestamp读Kafka异常的问题解决Flink写历史版本创建的bucket索引hudi表，索引数据错乱重复fileid问题解决Flink On HBase当条件为null时，使用错误下推Filter导致漏数问题解决Flink on hudi解析的时间范围如果超过2262-04-11 23:47:16，则会解析失败，报错overflow问题解决Spark/Flink写Hudi表，控制归档文件大小的参数不生效问题解决Spark任务，有多个ddl语句(drop，truncate，create)长时间执行不结束问题解决Spark建mor表带timestamp，Flink流读数据有误，相差8h问题解决cow/mor表执行完drop partition后，首次执行delete报错，堆栈异常问题解决datasource写Hudi表名和同步的Hive表明不一致，写入失败，sql写location指定到一个存量cow表目录，表名不一致，insert成功的问题 CDL链路hudi-dws性能优化解决CDL升级后业务用户未添加hadoop组，任务启动失败问题解决CDL hudi-dws链路配置max.commit.number参数时，偶现同步数据丢失问题解决当CDL存在链接源端库失败的作业，task线程泄漏，导致作业启动超时问题解决CDL Hudi connector代码中增加hoodie.datasource.hive_sync.skip_sync_schema参数，默认为true，优化元数据同步性能，减少性能毛刺问题解决CDL读Hudi表出现404失败，找不到rollback.requested问题解决CDL Task阻塞导致所有任务Task失败问题解决Yarn的jdbcserver资源超长时间不释放问题补丁兼容关系 MRS 3.2.0-LTS.1.1补丁包中包含所有MRS 3.2.0-LTS.1版本单点问题修复补丁。安装补丁的影响请参考安装补丁的影响。

MAPREDUCE服务 MRS MRS补丁说明

MAPREDUCE服务 MRS-MRS 1.9.2.3及之后版本补丁说明:安装补丁的影响

安装补丁的影响安装MRS 1.9.2.3补丁期间会重启MRS Manager，重启期间会引起MRS Manager服务暂时不可用。如果集群之前安装了1.9.2.2补丁，安装MRS 1.9.2.3补丁需要滚动重启HDFS、YARN、MapReduce、Kafka组件服务；否则安装MRS 1.9.2.3补丁需要滚动重启Hadoop、Hive、Spark、Kafka、Ranger、Presto以及相关依赖服务，滚动重启服务不断服。 MRS 1.9.2.3补丁安装完成之后，需要关闭指标共享，重新打开指标共享。慢盘隔离特性约束：隔离慢盘之前无法判断集群节点是否存在客户私有化数据，因此不要在节点数据盘存放个人私有化数据，避免慢盘隔离时对业务造成影响；自动触发慢盘隔离动作后，对于原来写两副本数据存在单副本运行的场景，存在一定风险，请知；同时华为侧运维人员会尽快对慢盘进行替换；慢盘自动隔离能力支持单节点同时出现多个慢盘【默认配置为4】时自动隔离节点，此时该节点会变成隔离状态，客户无需特殊操作，MRS运维相关人员会及时介入处理并恢复。支持HDFS单副本检测能力 MRS 1.9.2.3补丁中，会增加HDFS单副本检测和告警能力，新增是否允许写入单副本数据配置项dfs.single.replication.enable，对于新建集群该值配置为false，因为HDFS单副本并不属于MRS服务SLA保障范围；但是对于存量集群，为了考虑兼容性，补丁安装完成后dfs.single.replication.enable配置项值为true，保证客户业务不受影响，建议补丁完成后对于没有单副本诉求时手动修改为false后滚动重启HDFS服务，保证HDFS数据的高可靠；对于确定存在单副本诉求的文件也可通过dfs.single.replication.exclude.pattern配置项设置单副本的数据文件和目录。 MRS 1.9.2.3补丁安装完成之后，需要重启 OMS 服务。如果集群之前安装了1.9.2.2补丁，不需要做此操作。使用root用户登录主备OMS节点，切换至omm用户，执行命令sh ${BIGDATA_HOME}/om-0.0.1/sbin/restart-oms.sh重启OMS服务。主备OMS节点都需要重启。 MRS 1.9.2.3补丁安装后，需要重新下载安装全量的客户端，包含Master节点的原始客户端和虚拟私有云的其他节点使用的客户端（即用户自行搭建的客户端）。如果集群之前安装了1.9.2.2补丁，不需要做此操作。主Master节点的原始客户端全量更新，请参见全量更新主Master节点的原始客户端。备Master节点的原始客户端全量更新，请参见全量更新备Master节点的原始客户端。自行搭建的客户端全量安装方法，请参见安装客户端（3.x之前版本）。重新安装客户端前建议先对老客户端进行备份。若用户根据业务场景修改过客户端配置，请在重装客户端后再次修改客户端配置。

MAPREDUCE服务 MRS MRS补丁说明

MAPREDUCE服务 MRS-MRS 1.9.2.3及之后版本补丁说明:MRS 1.9.2.3补丁说明

MRS 1.9.2.3补丁说明表1 补丁基本信息补丁号 MRS 1.9.2.3 发布时间 2023-07-30 安装前处理安装此补丁前，如果之前有装过MRS_1x2x_Patch_Diskmgt_20230308.tar.gz补丁，需要先卸载该补丁，卸载完之后请等待10分钟再执行MRS 1.9.2.3补丁的安装操作。如果MRS集群节点故障或者网络不通，需要先隔离该节点，否则补丁会安装失败。新特性和优化支持运维巡检支持租户面直接对接 CES 支持对慢盘自动隔离能力支持D系列磁盘热插拔支持HDFS单副本检测能力补丁兼容关系 MRS 1.9.2.3补丁包中包含MRS 1.9.2版本已发布的所有补丁已解决的问题。

MAPREDUCE服务 MRS MRS补丁说明

MAPREDUCE服务 MRS-MRS 1.7.1.6补丁说明:安装补丁的影响

安装补丁的影响安装MRS 1.7.1.1，MRS 1.7.1.2补丁期间会重启服务，重启服务期间会引起服务暂时不可用。如果已经安装了MRS 1.7.1.2补丁之后，从MRS 1.7.1.2升级其他补丁不会重启服务，业务不断服。 MRS 1.7.1.1，MRS 1.7.1.2补丁安装后，需要重新下载安装全量的客户端，包含Master节点的原始客户端和虚拟私有云的其他节点使用的客户端（即您自行搭建的客户端）。主Master节点的原始客户端全量更新，请参见全量更新主Master节点的原始客户端。备Master节点的原始客户端全量更新，请参见全量更新备Master节点的原始客户端。自行搭建的客户端全量安装方法，请参见安装客户端（3.x之前版本）。重新安装客户端前建议先对老客户端进行备份。若您根据业务场景修改过客户端配置，请重装客户端后再次修改客户端配置。

MAPREDUCE服务 MRS MRS补丁说明

MAPREDUCE服务 MRS-MRS 1.7.1.6补丁说明:补丁基本信息

补丁基本信息表1 补丁基本信息补丁号 MRS 1.7.1.6 发布时间 2019-01-24 解决的问题 MRS 1.7.1.6修复问题列表： MRS Manager MRS服务启动、停止及重启支持显示依赖关系，并自定义重启哪些服务。 MRS Manager查看HBase集群运行状态时，增加集群维度的监控项。 MRS 大数据组件 MRS hue支持Yarn任务的管理功能，如停止应用。 MRS 支持HBase压缩队列告警。 MRS 1.7.1.5 修复问题列表： MRS Manager MRS Manager UI界面排版优化 MRS Manager 操作及显示易用性优化 MRS Manager 增加大数据服务滚动重启能力 MRS Manager 新增文件句柄数量监控 MRS Manager 新增大数据组件发生重启事件上报 MRS 镜像解决E CS VNC登录不停打印输出问题解决操作系统日志转储配置问题 MRS 1.7.1.3 修复问题列表： MRS Manager新增运维通道功能。 MRS 1.7.1.2 修复问题列表： MRS Manager MRS Manager单击审计日志详细信息下载报错。 MRS Manager界面中主机列表下的磁盘使用率计算优化。 MRS 1.7.1.1 修复问题列表： Kafka组件问题 KAFKA-5413 Kafka日志清理失败：segment文件offset跨度过大。 KAFKA-6529 客户端异常断开场景，Broker内存泄露。 KAFKA-5417 并发场景下，客户端连接状态不一致。 HBase问题 HBase解决每次执行balance命令，重复计算region location的问题补丁兼容关系 MRS 1.7.1.6补丁包中包含MRS 1.7.1.1，MRS 1.7.1.2，MRS 1.7.1.3 和MRS 1.7.1.5补丁包的全部内容。

MAPREDUCE服务 MRS MRS补丁说明

MAPREDUCE服务 MRS-MRS 1.7.1.6补丁说明:注意事项

注意事项 MRS 1.7.1.6补丁安装之后，HBase和Hue的配置状态会变成过期状态，需要手动在MRS Manager页面执行滚动重启HBase服务和Hue服务。具体操作请参考支持滚动重启。图1 HBase服务和Hue服务状态新增弹性公网IP访问MRS Manager功能，弹性公网IP使用及注意事项说明参考访问MRS Manager（MRS 2.x及之前版本）。普通集群（Kerberos关闭）增加了登录MRS Manager认证功能，默认初始账号为：admin 密码为MrsDefault@123，首次登录请及时修改登录密码。安全集群登录MRS Manager认证的账号名密码为用户自己设定值。由于1.7.1 集群的健康检查中存在一项误报，而补丁安装前会进行集群的健康检查。从而导致客户第一次提交安装补丁后，提示集群异常，补丁安装终止。在确认报错是误报后，客户可以再次提交安装补丁请求，第二次安装补丁会跳过健康检查，进行补丁安装。误报内容可以通过如下方式确认：查看并导出检查报告，健康检查结果上只存在这两个主机报错：“安装目录及数据目录检查：目录下文件异常. 请检查安装目录和数据目录下的内容”。图2 健康检查结果表

MAPREDUCE服务 MRS MRS补丁说明

MAPREDUCE服务 MRS-MRS 1.9.3.9及之后版本补丁说明:MRS 1.9.3.9补丁说明

MRS 1.9.3.9补丁说明补丁号 MRS 1.9.3.9 发布时间 2023-07-30 安装前处理安装此补丁前，如果之前有装过MRS_1x2x_Patch_Diskmgt_20230308.tar.gz补丁，需要先卸载该补丁，卸载完之后请等待10分钟再执行MRS 1.9.3.9补丁的安装操作。如果MRS集群节点故障或者网络不通，需要先隔离该节点，否则补丁会安装失败。新特性和优化 MRS Manager 支持对慢盘自动隔离能力支持D系列磁盘热插拔支持HDFS单副本检测能力补丁兼容关系 MRS 1.9.3.9补丁包中已包含所有MRS 1.9.3版本单点问题修复补丁。安装补丁的影响请参考安装补丁的影响。

MAPREDUCE服务 MRS MRS补丁说明

MAPREDUCE服务 MRS-MRS 1.9.3.9及之后版本补丁说明:安装补丁的影响

安装补丁的影响 MRS 1.9.3.10补丁安装/卸载过程中会自动重启OMS，安装过程中将影响作业提交以及集群扩缩容等管控面集群控制功能，请选择适当的时间进行补丁安装，不需要重启大数据组件。 MRS 1.9.3.9补丁安装/卸载过程中会自动重启OMS，安装过程中将影响作业提交以及集群扩缩容等管控面集群控制功能，请选择适当的时间进行补丁安装，安装完需要重启HDFS、YARN、MapReduce、Kafka以及相关依赖服务。 MRS 1.9.3.8补丁安装/卸载过程中会自动重启OMS，安装过程中将影响作业提交以及集群扩缩容等管控面集群控制功能，请选择适当的时间进行补丁安装，安装完需要重启HDFS、YARN、MapReduce、Kafka、Hive、HBase、Spark、Presto以及相关依赖服务。重启组件的范围，是以补丁依次升级给定的范围，即如果是从MRS 1.9.3.8打补丁升级到MRS 1.9.3.9，需要重启MRS 1.9.3.9补丁的组件；如果是跨版本升级的，则需要重启的组件范围是各补丁的合集。慢盘隔离特性约束：隔离慢盘之前无法判断集群节点是否存在客户私有化数据，因此不要在节点数据盘存放个人私有化数据，避免慢盘隔离时对业务造成影响；自动触发慢盘隔离动作后，对于原来写两副本数据存在单副本运行的场景，存在一定风险，请知；同时华为侧运维人员会尽快对慢盘进行替换；慢盘自动隔离能力支持单节点同时出现多个慢盘【默认配置为4】时自动隔离节点，此时该节点会变成隔离状态，客户无需特殊操作，MRS运维相关人员会及时介入处理并恢复。支持HDFS单副本检测能力 MRS 1.9.3.9及其后续补丁中，会增加HDFS单副本检测和告警能力，新增是否允许写入单副本数据配置项dfs.single.replication.enable，对于新建集群该值配置为false，因为HDFS单副本并不属于MRS服务SLA保障范围；但是对于存量集群，为了考虑兼容性，补丁安装完成后dfs.single.replication.enable配置项值为true，保证客户业务不受影响，建议补丁完成后对于没有单副本诉求时手动修改为false后滚动重启HDFS服务，保证HDFS数据的高可靠；对于确定存在单副本诉求的文件也可通过dfs.single.replication.exclude.pattern配置项设置单副本的数据文件和目录。

MAPREDUCE服务 MRS MRS补丁说明

MAPREDUCE服务 MRS-MRS 1.9.3.9及之后版本补丁说明:MRS 1.9.3.10补丁说明

MRS 1.9.3.10补丁说明补丁号 MRS 1.9.3.10 发布时间 2023-11-10 安装前处理安装此补丁前，如果之前有装过MRS_1x2x_Patch_Diskmgt_20230308.tar.gz补丁，需要先卸载该补丁，卸载完之后请等待10分钟再执行MRS 1.9.3.10补丁的安装操作。如果MRS集群节点故障或者网络不通，需要先隔离该节点，否则补丁会安装失败。新特性和优化 MRS Manager 新增磁盘不可用告警新增设备分区丢失告警自动清除能力慢盘/卡io算法优化慢盘自动隔离机制优化补丁兼容关系 MRS 1.9.3.10补丁包中已包含所有MRS 1.9.3版本单点问题修复补丁。安装补丁的影响请参考安装补丁的影响。

MAPREDUCE服务 MRS MRS补丁说明

云服务器内容精选

MRS补丁说明

7*24

备案

专业服务

退订

建议反馈

售前咨询热线