MapReduce服务 MRS-NodeManager关闭导致Executor(s)未移除:回答

时间:2025-02-12 14:58:21

回答

因为ResourceManager感知到NodeManager关闭时,Executor(s)已经因空闲超时而被driver请求结束。

但因为NodeManager已经关闭,这些Executor(s)实际上并不能被结束,因此driver不能感知到这些Executor(s)的LOST事件,所以并未从自身的Executor list中移除。

从而导致在driver页面上还能看到这些Executor(s),这是YARN NodeManager关闭之后的正常现象,NodeManager再次启动后,这些Executor(s)会被移除。

support.huaweicloud.com/cmpntguide-mrs/mrs_01_2011.html