MAPREDUCE服务 MRS-为什么MRS Console页面Flink作业状态与Yarn上的作业状态不一致?

时间:2024-11-22 11:26:54

为什么 MRS Console页面Flink作业状态与Yarn上的作业状态不一致?

:为什么MRS Console页面Flink作业状态与Yarn上的作业状态不一致?

答:为了节约存储空间,用户修改了Yarn的配置项yarn.resourcemanager.max-completed-applications,减小yarn上历史作业的记录保存个数。由于Flink是长时作业,在yarn上realJob还在运行,但launcherJob已经被删除,导致因从Yarn上查不到launcherJob,从而更新作业状态失败。该问题在2.1.0.6补丁中解决。

解决方法:终止找不到launcherJob的作业,后续提交的作业状态就会更新。

support.huaweicloud.com/mrs_faq/mrs_03_1175.html