MAPREDUCE服务 MRS-为什么MRS Console页面Flink作业状态与Yarn上的作业状态不一致?
为什么 MRS Console页面Flink作业状态与Yarn上的作业状态不一致?
问:为什么MRS Console页面Flink作业状态与Yarn上的作业状态不一致?
答:为了节约存储空间,用户修改了Yarn的配置项yarn.resourcemanager.max-completed-applications,减小yarn上历史作业的记录保存个数。由于Flink是长时作业,在yarn上realJob还在运行,但launcherJob已经被删除,导致因从Yarn上查不到launcherJob,从而更新作业状态失败。该问题在2.1.0.6补丁中解决。
解决方法:终止找不到launcherJob的作业,后续提交的作业状态就会更新。
- MapReduce服务_如何使用MapReduce服务_MRS集群客户端安装与使用
- MapReduce服务_什么是Flink_如何使用Flink
- MapReduce服务_什么是Yarn_如何使用Yarn
- MapReduce服务_什么是Hue_如何使用Hue
- 大数据分析是什么_使用MapReduce_创建MRS服务
- MapReduce服务_什么是Loader_如何使用Loader
- MapReduce服务_什么是存算分离_如何配置MRS集群存算分离
- MRS优势_什么是MRS_MRS功能
- 数据治理中心_数据开发_数据开发能力_脚本和节点介绍-华为云
- MapReduce工作原理_MapReduce是什么意思_MapReduce流程_MRS_华为云