MAPREDUCE服务 MRS-配置HDFS文件目录标签策略（NodeLabel）:块副本位置选择

时间：2024-08-01 19:24:48

MAPREDUCE服务 MRS

块副本位置选择

NodeLabel支持对各个副本的摆放采用不同的策略，如表达式“label-1,label-2,label-3”，表示3个副本分别放到含有label-1、label-2、label-3的DataNode中，不同的副本策略用逗号分隔。

如果label-1，希望放2个副本，可以这样设置表达式：“label-1[replica=2],label-2,label-3”。这种情况下，如果默认副本数是3，则会选择2个带有label-1和一个label-2的节点；如果默认副本数是4，会选择2个带有label-1、一个label-2以及一个label-3的节点。可以注意到，副本数是从左到右依次满足各个副本策略的，但也有副本数超过表达式表述的情况，当默认副本数为5时，多出来的一个副本会放到最后一个节点中，也就是label-3的节点里。

当启用ACLs功能并且用户无权访问表达式中使用的标签时，将不会为副本选择属于该标签的DataNode。

上一篇：MAPREDUCE服务 MRS-配置HDFS文件目录标签策略（NodeLabel）:多余块副本删除选择

下一篇：MAPREDUCE服务 MRS-配置HDFS文件目录标签策略（NodeLabel）:多余块副本删除选择