华为云首页用户手册

MAPREDUCE服务 MRS-快速创建和使用启用安全认证的MRS集群:步骤四：准备应用程序及数据

MAPREDUCE服务 MRS-快速创建和使用启用安全认证的MRS集群:步骤四：准备应用程序及数据

时间：2024-11-21 14:20:59

MAPREDUCE服务 MRS

步骤四：准备应用程序及数据

MRS 集群创建成功后，可获取集群客户端内的wordcount样例程序进行运行，也可准备上层业务自行开发的大数据应用程序并上传至集群。本指南以运行MRS集群客户端内的wordcount样例程序为例进行介绍，需先准备wordcount样例程序运行所需的数据文件。

以root用户登录Master1节点。
准备数据文件。

数据文件无格式要求，例如文件名为“wordcount1.txt”和“wordcount2.txt”，内容如下所示：

vi /opt/wordcount1.txt
```
hello word
hello wordcount
```
vi /opt/wordcount2.txt
```
hello mapreduce
hello hadoop
```
执行以下命令切换到客户端安装目录，配置环境变量并创建用于存放样例数据的HDFS目录，例如“/user/example/input”。

cd /opt/client

source bigdata_env

kinit test（test为6创建的用户名，如果该用户首次登录，需修改初始密码）

hdfs dfs -mkdir /user/example

hdfs dfs -mkdir /user/example/input
6创建的test用户仅具有“/user”目录的“读”、“写”和“执行”权限，如果在“/user”之外其他目录中创建“input”目录会报权限不足错误，例如：

hdfs dfs -mkdir /hbase/input

命令执行后会报如下错误：
```
mkdir: Permission denied: user=test, access=EXECUTE, inode="/hbase":hbase:hadoop:drwxrwx--T
```
执行以下命令，将样例数据上传至HDFS。

hdfs dfs -put /opt/wordcount1.txt /user/example/input

hdfs dfs -put /opt/wordcount2.txt /user/example/input

上一篇：MAPREDUCE服务 MRS-快速创建和使用启用安全认证的MRS集群:步骤三：安装集群客户端

下一篇：MAPREDUCE服务 MRS-快速创建和使用启用安全认证的MRS集群:步骤三：安装集群客户端

新客秒杀 2核2G 3M L实例

68元/年

普惠上云领千元上云礼券

立即前往

企业专享 X实例 4核8G 5M

888元/年

热门域名 1元随心购

1元/年起

MAPREDUCE服务 MRS-快速创建和使用启用安全认证的MRS集群:步骤四：准备应用程序及数据

意见反馈

0/200

提交成功！非常感谢您的反馈，我们会继续努力做到更好反馈提交失败！请稍后重试！

推荐文章

解决方案
相关专题