MAPREDUCE服务 MRS-MapReduce任务运行失败,ApplicationMaster出现物理内存溢出异常:回答

时间:2024-08-01 19:24:46

回答

这是性能规格的问题,MapReduce任务运行失败的根本原因是由于ApplicationMaster的内存溢出导致的,即物理内存溢出导致被NodeManager kill。

解决方案:

将ApplicationMaster的内存配置调大,在客户端“客户端安装路径/Yarn/config/mapred-site.xml”配置文件中优化如下参数:

  • “yarn.app.mapreduce.am.resource.mb”
  • “yarn.app.mapreduce.am.command-opts”,该参数中-Xmx值建议为0.8*“yarn.app.mapreduce.am.resource.mb”
support.huaweicloud.com/cmpntguide-lts-mrs/mrs_01_1794.html