MAPREDUCE服务 MRS-MapReduce Action:参数解释

时间:2024-06-13 09:38:26

参数解释

MapReduce Action节点中包含的各参数及其含义,请参见表1

表1 参数含义

参数

含义

name

map-reduce action的名称

resourceManager

MapReduce ResourceManager地址

name-node

HDFS NameNode地址

queueName

任务处理时使用的MapReduce队列名

mapred.mapper.class

Mapper类名

mapred.reducer.class

Reducer类名

mapred.input.dir

MapReduce处理数据的输入目录

mapred.output.dir

MapReduce处理后结果数据输出目录

mapred.map.tasks

MapReduce map任务个数

“${变量名}”表示:该值来自job.properties所定义。

例如:${nameNode}表示的就是“hdfs://hacluster”。(可参见job.properties

support.huaweicloud.com/devg-lts-mrs/mrs_07_160021.html