华为云首页用户手册

MAPREDUCE服务 MRS-配置Hive表不同分区分别存储至OBS和HDFS:操作示例

MAPREDUCE服务 MRS-配置Hive表不同分区分别存储至OBS和HDFS:操作示例

时间：2024-10-16 17:58:33

MAPREDUCE服务 MRS Hive企业级能力增强

操作示例

以Hive客户端安装用户登录安装客户端的节点。
执行以下命令，切换到客户端安装目录。
cd 客户端安装目录

例如安装目录为“/opt/client”，则执行以下命令：

cd /opt/client
执行以下命令配置环境变量。
source bigdata_env
集群认证模式是否为安全模式。
- 是，执行以下命令进行用户认证：
  kinit Hive业务用户
- 否，执行5。
执行以下命令登录Hive客户端。
beeline
执行如下命令创建Hive分区表“table_1”，指定分区“pt='2021-12-12'”的路径为“hdfs//xxx”，指定分区“pt='2021-12-18'”的路径为“obs://xxx”：
create table table_1(id string) partitioned by(pt string) [stored as [orc|textfile|parquet|...]];

alter table table_1 add partition(pt='2021-12-12') location 'hdfs://xxx';

alter table table_1 add partition(pt='2021-12-18') location 'obs://xxx';
给分区表“table_1”中插入数据后，对应的分区数据存储在对应的存储源上，可以使用desc查看分区的location，执行以下命令查看路径下的数据：
desc formatted table_1 partition(pt='2021-12-18');

上一篇：MAPREDUCE服务 MRS-配置HetuEngine SQL诊断功能:HetuEngine SQL诊断功能介绍

下一篇：MAPREDUCE服务 MRS-在Beeline/JDBCServer模式下连续运行10T的TPCDS测试套会出现内存不足的现象:回答

华为云11.11 2核1G 2M 云服务器

29元/年

立即注册领万元上云礼券

抽奖赢11111元免单

续费同价 L实例 2核2G 4M

98元/年

热门域名 1元随心购

1元/年

MAPREDUCE服务 MRS-配置Hive表不同分区分别存储至OBS和HDFS:操作示例

意见反馈

0/200

提交成功！非常感谢您的反馈，我们会继续努力做到更好反馈提交失败！请稍后重试！

推荐文章

解决方案
相关专题