MAPREDUCE服务 MRS-【Spark WebUI】HistoryServer缓存的应用被回收导致此类应用页面访问时出错:用户问题

时间:2024-08-27 10:23:57

用户问题

在History Server页面中访问某个Spark应用的页面时,发现访问时出错。

查看相应的HistoryServer日志后,发现有“FileNotFound”异常,相关日志如下所示:

2020-11-22 23:58:03,694 | WARN  | [qtp55429210-232] | /history/application_1479662594976_0001/stages/stage/ | org.sparkproject.jetty.servlet.ServletHandler.doHandle(ServletHandler.java:628)
java.io.FileNotFoundException: ${BIGDATA_HOME}/tmp/spark/jobHistoryTemp/blockmgr-5f1f6aca-2303-4290-9845-88fa94d78480/09/temp_shuffle_11f82aaf-e226-46dc-b1f0-002751557694 (No such file or directory)
support.huaweicloud.com/trouble-mrs/mrs_03_0802.html