MapReduce服务 MRS-【Spark WebUI】HistoryServer缓存的应用被回收导致此类应用页面访问时出错:用户问题
时间:2025-02-12 15:01:24
用户问题
在History Server页面中访问某个Spark应用的页面时,发现访问时出错。
查看相应的HistoryServer日志后,发现有“FileNotFound”异常,相关日志如下所示:
2020-11-22 23:58:03,694 | WARN | [qtp55429210-232] | /history/application_1479662594976_0001/stages/stage/ | org.sparkproject.jetty.servlet.ServletHandler.doHandle(ServletHandler.java:628)java.io.FileNotFoundException: ${BIGDATA_HOME}/tmp/spark/jobHistoryTemp/blockmgr-5f1f6aca-2303-4290-9845-88fa94d78480/09/temp_shuffle_11f82aaf-e226-46dc-b1f0-002751557694 (No such file or directory)
support.huaweicloud.com/trouble-mrs/mrs_03_0802.html