MAPREDUCE服务 MRS-通过Hue创建Sqoop任务将数据从HBase导入HDFS时报错:处理步骤

时间:2024-08-27 10:23:56

处理步骤

  1. 进入Sqoop的安装目录下查找文件。

    1. 进入Sqoop节点的“/opt/Bigdata/ MRS _1.9.2/install/ FusionInsight -Sqoop-1.99.7/FusionInsight-Sqoop-1.99.7/server/lib”目录下,进行grep查找。

    2. 进入Yarn WebUI界面,查看运行的任务的报错具体信息。

    3. 将java.class.path复制出来,搜索htrace-core。

    4. 复制jar包到如下位置。

      cp /opt/Bigdata/MRS_1.9.2/install/FusionInsight-Sqoop-1.99.7/FusionInsight-Sqoop-1.99.7/server/lib/htrace-core-3.1.0-incubating.jar /opt/Bigdata/MRS_1.9.2/install/FusionInsight-Hadoop-2.8.3/hadoop/share/hadoop/common/lib/

    5. 修改权限。

      chmod 777 htrace-core-3.1.0-incubating.jar (真实复制的jar包)

      chown omm:ficommon htrace-core-3.1.0-incubating.jar (真实复制的jar包)

    6. 查看hosts文件,对其他所有节点进行同样的复制jar包操作。

    7. 重新运行sqoop任务,产生报错如下:

  2. 去HBase的安装目录下查找文件。

    1. 进入HBase的lib目录下,进行grep查找。

    2. 继续复制jar包。

      cp /opt/Bigdata/MRS_1.9.2/install/FusionInsight-HBase-1.3.1/hbase/lib/metrics-core-2.2.0.jar /opt/Bigdata/MRS_1.9.2/install/FusionInsight-Hadoop-2.8.3/hadoop/share/hadoop/common/lib/

    3. 修改文件权限。

      chmod 777 metrics-core-2.2.0.jar (真实复制的jar包)

      chown omm:ficommon metrics-core-2.2.0.jar(真实复制的jar包)

    4. 查看hosts文件,对其他所有节点进行同样的复制jar包操作。
    5. 继续运行sqoop任务,成功。

support.huaweicloud.com/trouble-mrs/mrs_03_0710.html