华为云首页用户手册

MAPREDUCE服务 MRS-通过Sqoop迁移数据库数据时报错:处理步骤

MAPREDUCE服务 MRS-通过Sqoop迁移数据库数据时报错:处理步骤

时间：2024-08-27 10:23:57

MAPREDUCE服务 MRS

处理步骤

检查源端数据库端口对集群节点均放通。
若使用EIP公网通信，那么集群节点均需要绑定公网，尤其是分析节点，必须绑定公网才能保证作业正常运行。

sqoop实例一般分布在Master节点，但作业真正运行在分析节点，因此创建数据库连接，是和Master节点通信，作业是通过Yarn任务分发到分析节点执行。
检查Sqoop实例安装目录下是否放置数据库驱动jar包，并保证jar包路径正确，文件权限及属主属组正确；配置文件正确配置；保证这些后需要重启Sqoop实例后才可以正常加载驱动。
- MRS 3.X集群驱动路径为：/opt/Bigdata/ FusionInsight _Current/1_xx_LoaderServer/install/FusionInsight-Sqoop-1.99.3/server/webapps/loader/WEB-INF/ext-lib/
- MRS3.X之前版本集群驱动路径为：/opt/Bigdata/MRS_XXX/install/FusionInsight-Sqoop-1.99.7/FusionInsight-Sqoop-1.99.7/server/jdbc/
  
  3.x之前版本需要修改配置文件。
如果是命令行提交作业，建议指定--driver参数。
如源端是DWS时命令行加：--driver com.xxx.gauss200.jdbc.Driver ，如下图。

图3 源端是dws时driver参数

其他数据库根据实际情况填写--driver参数。

上一篇：MAPREDUCE服务 MRS-MRS集群如何使用公网访问Presto:问题分析

下一篇：MAPREDUCE服务 MRS-通过Sqoop迁移数据库数据时报错:用户问题

MAPREDUCE服务 MRS-通过Sqoop迁移数据库数据时报错:处理步骤

意见反馈

0/200

提交成功！非常感谢您的反馈，我们会继续努力做到更好反馈提交失败！请稍后重试！

推荐文章

解决方案
相关专题