MAPREDUCE服务 MRS-Flume向Spark Streaming提交作业后报类找不到错误:处理步骤

时间:2024-08-27 10:23:51

处理步骤

  1. 使用 --jars 加载flume-ng-sdk-{version}.jar依赖包。
  2. 同时修改“spark-default.conf”中两个配置项。

    spark.driver.extraClassPath=$PWD/*:{加上原来配置的值}

    spark.executor.extraClassPath =$PWD/*

  3. 作业运行成功。如果还有报错,则需要排查还有哪个jar没有加载,再次执行步骤1和步骤2。
support.huaweicloud.com/trouble-mrs/mrs_03_0023.html