华为云首页用户手册

MAPREDUCE服务 MRS-Hive JDBC应用开发快速入门:获取样例工程

MAPREDUCE服务 MRS-Hive JDBC应用开发快速入门:获取样例工程

时间：2024-05-30 15:28:35

MAPREDUCE服务 MRS

获取样例工程

通过开源镜像站获取样例工程。
下载样例工程的Maven工程源码和配置文件，并在本地配置好相关开发工具，可参考通过开源镜像站获取样例工程。

根据集群版本选择对应的分支，下载并获取 MRS 相关样例工程。

例如本章节场景对应示例为“hive-jdbc-example”样例，获取地址：https://github.com/huaweicloud/huaweicloud-mrs-example/tree/mrs-3.1.5/src/hive-examples/hive-jdbc-example。
本地使用IDEA工具导入样例工程，等待Maven工程下载相关依赖包，具体操作可参考配置并导入样例工程。

图1 Hive样例工程示例

本地配置好Maven及SDK相关参数后，样例工程会自动加载相关依赖包。
将准备应用开发配置文件中获取的集群配置文件及用户认证文件放置在样例工程的“resources”目录下。
如需连接开启了Kerberos认证的MRS集群，在Hive样例工程代码中，需配置相关认证信息。
在“com.huawei.bigdata.hive.examples”包的“JDBCExample”类中修改“USER_NAME”为实际用户名，例如“developuser”。
```
KRB5_FILE = userdir + "krb5.conf";
System.setProperty("java.security.krb5.conf", KRB5_FILE);
USER_NAME = "developuser";
if ("KERBEROS".equalsIgnoreCase(auth)) {
    USER_KEYTAB_FILE = "src/main/resources/user.keytab";
    ZOOKEEPER_DEFAULT_SERVER_PRINCIPAL = "zookeeper/" + getUserRealm();
    System.setProperty(ZOOKEEPER_SERVER_PRINCIPAL_KEY, ZOOKEEPER_DEFAULT_SERVER_PRINCIPAL);
}
...
```
本样例工程中，基于业务场景的开发思路如下，各功能代码片段详情说明可参考JDBC访问Hive样例程序：
1. 数据准备。
  1. 创建表，雇员信息表“employees_info”。
  2. 加载雇员信息数据到雇员信息表“employees_info”中。
2. 数据分析。
  统计表employees_info中有多少条记录。
3. 删除表。

上一篇：MAPREDUCE服务 MRS-Hive JDBC应用开发快速入门:编译并运行程序

下一篇：MAPREDUCE服务 MRS-Hive JDBC应用开发快速入门:编译并运行程序

华为云11.11 2核1G 2M 云服务器

29元/年

立即注册领万元上云礼券

抽奖赢11111元免单

续费同价 L实例 2核2G 4M

98元/年

热门域名 1元随心购

1元/年

MAPREDUCE服务 MRS-Hive JDBC应用开发快速入门:获取样例工程

意见反馈

0/200

提交成功！非常感谢您的反馈，我们会继续努力做到更好反馈提交失败！请稍后重试！

推荐文章

解决方案
相关专题