MAPREDUCE服务 MRS-Spark Streaming任务一直阻塞:问题

时间:2024-11-25 09:23:50

问题

运行一个Spark Streaming任务,确认有数据输入后,发现没有任何处理的结果。打开Web界面查看Spark Job执行情况,发现如下图所示:有两个Job一直在等待运行,但一直无法成功运行。

图1 Active Jobs

继续查看已经完成的Job,发现也只有两个,说明Spark Streaming都没有触发数据计算的任务(Spark Streaming默认有两个尝试运行的Job,就是图中两个)

图2 Completed Jobs
support.huaweicloud.com/cmpntguide-mrs/mrs_01_2050.html