MAPREDUCE服务 MRS-MRS 1.9.2.3及之后版本补丁说明:安装补丁的影响

时间:2024-08-18 05:14:16

安装补丁的影响

  • 安装 MRS 1.9.2.5补丁期间会重启MRS Manager,重启期间会引起MRS Manager服务暂时不可用。如果集群之前安装了1.9.2.3补丁,安装完MRS 1.9.2.5补丁后不需要重启服务,否则安装MRS 1.9.2.5补丁需要滚动重启Hadoop、Hive、Spark、Kafka、Ranger、Presto以及相关依赖服务。
  • 安装MRS 1.9.2.3补丁期间会重启MRS Manager,重启期间会引起MRS Manager服务暂时不可用。
  • 如果集群之前安装了1.9.2.2补丁,安装MRS 1.9.2.3补丁需要滚动重启HDFS、YARN、MapReduce、Kafka组件服务;否则安装MRS 1.9.2.3补丁需要滚动重启Hadoop、Hive、Spark、Kafka、Ranger、Presto以及相关依赖服务,滚动重启服务不断服。
  • MRS 1.9.2.3补丁安装完成之后,需要关闭指标共享,重新打开指标共享。
  • 慢盘隔离特性约束:
    1. 隔离慢盘之前无法判断集群节点是否存在客户私有化数据,因此不要在节点数据盘存放个人私有化数据,避免慢盘隔离时对业务造成影响;
    2. 自动触发慢盘隔离动作后,对于原来写两副本数据存在单副本运行的场景,存在一定风险,请知;同时华为侧运维人员会尽快对慢盘进行替换;
    3. 慢盘自动隔离能力支持单节点同时出现多个慢盘【默认配置为4】时自动隔离节点,此时该节点会变成隔离状态,客户无需特殊操作,MRS运维相关人员会及时介入处理并恢复。
  • 支持HDFS单副本检测能力

    MRS 1.9.2.3补丁中,会增加HDFS单副本检测和告警能力,新增是否允许写入单副本数据配置项dfs.single.replication.enable,对于新建集群该值配置为false,因为HDFS单副本并不属于MRS服务SLA保障范围; 但是对于存量集群,为了考虑兼容性,补丁安装完成后dfs.single.replication.enable配置项值为true,保证客户业务不受影响,建议补丁完成后对于没有单副本诉求时手动修改为false后滚动重启HDFS服务,保证HDFS数据的高可靠; 对于确定存在单副本诉求的文件也可通过dfs.single.replication.exclude.pattern配置项设置单副本的数据文件和目录。

  • MRS 1.9.2.3补丁安装完成之后,需要重启 OMS 服务。如果集群之前安装了1.9.2.2补丁,不需要做此操作。
    • 使用root用户登录主备OMS节点,切换至omm用户,执行命令sh ${BIGDATA_HOME}/om-0.0.1/sbin/restart-oms.sh重启OMS服务。
    • 主备OMS节点都需要重启。
  • MRS 1.9.2.3补丁安装后,需要重新下载安装全量的客户端,包含Master节点的原始客户端和虚拟私有云的其他节点使用的客户端(即用户自行搭建的客户端)。如果集群之前安装了1.9.2.2补丁,不需要做此操作。
    • 重新安装客户端前建议先对老客户端进行备份。
    • 若用户根据业务场景修改过客户端配置,请在重装客户端后再次修改客户端配置。
support.huaweicloud.com/usermanual-mrs/mrs_01_249135.html