MAPREDUCE服务 MRS-当一个NodeManager处于unhealthy的状态10分钟时,新应用程序失败:回答
回答
当nodeSelectPolicy为SEQUENCE,且第一个连接到RM的NM不可用时,RM会在“yarn.nm.liveness-monitor.expiry-interval-ms”属性中指定的周期内,一直尝试为同一个NM分配任务。
可以通过两种方式来避免上述问题:
- 使用其他的nodeSelectPolicy,如RANDOM。
- 参考修改集群服务配置参数,进入Yarn“全部配置”页面。在搜索框搜索以下参数,通过“yarn-site.xml”文件更改以下属性:
“yarn.resourcemanager.am-scheduling.node-blacklisting-enabled” = “true”;
“yarn.resourcemanager.am-scheduling.node-blacklisting-disable-threshold” = “0.5”。
- MapReduce服务_什么是Yarn_如何使用Yarn
- MapReduce服务_如何使用MapReduce服务_MRS集群客户端安装与使用
- MapReduce服务_什么是HDFS_HDFS特性
- MapReduce服务_什么是ZooKeeper_如何使用ZooKeeper
- MapReduce服务_什么是Flume_如何使用Flume
- MapReduce服务_什么是MapReduce服务_什么是HBase
- 云备份_云备份功能_云备份在哪里打开
- MapReduce服务_什么是Flink_如何使用Flink
- 大数据分析是什么_使用MapReduce_创建MRS服务
- MapReduce服务_什么是Kafka_如何使用Kafka