华为云首页用户手册

MAPREDUCE服务 MRS-设置HBase和HDFS的句柄数限制:设置HBase和HDFS的句柄数限制

MAPREDUCE服务 MRS-设置HBase和HDFS的句柄数限制:设置HBase和HDFS的句柄数限制

时间：2024-08-01 19:24:48

MAPREDUCE服务 MRS

设置HBase和HDFS的句柄数限制

联系集群管理员增加各用户的句柄数。该配置为操作系统的配置，并非HBase或者HDFS的配置。建议集群管理员根据HBase和HDFS的业务量及各操作系统用户的权限进行句柄数设置。如果某一个用户需对业务量很大的HDFS进行很频繁且很多的操作，则为此用户设置较大的句柄数，避免出现以上错误。

使用root用户登录集群所有节点机器或者客户端机器的操作系统，并进入“/etc/security”目录。
执行如下命令编辑“limits.conf”文件。
vi limits.conf

新增如下内容：
```
hdfs  -       nofile  32768 
hbase -       nofile  32768
```
其中“hdfs”和“hbase”表示业务中用到的操作系统用户名称。
- 只有root用户有权限编辑“limits.conf”文件。
- 如果修改的配置不生效，请确认“/etc/security/limits.d”目录下是否有针对操作系统用户的其他nofile值。这样的值可能会覆盖“/etc/security/limits.conf”中配置的值。
- 如果用户需要对HBase进行操作，建议将该用户的句柄数设置为“10000”以上。如果用户需要对HDFS进行操作，建议根据业务量大小设置对应的句柄数，建议不要给太小的值。如果用户需要对HBase和HDFS操作，建议设置较大的值，例如“32768”。
使用如下命令查看某一用户的句柄数限制。
su - user_name

ulimit -n

界面会返回此用户的句柄数限制值。如下所示：
```
8194
```

上一篇：MAPREDUCE服务 MRS-多CPU内核下的MapReduce调优配置:操作步骤

下一篇：MAPREDUCE服务 MRS-配置HDFS文件目录标签策略（NodeLabel）:基于标签的数据块摆放策略样例

华为云11.11 2核1G 2M 云服务器

29元/年

立即注册领万元上云礼券

抽奖赢11111元免单

续费同价 L实例 2核2G 4M

98元/年

热门域名 1元随心购

1元/年

MAPREDUCE服务 MRS-设置HBase和HDFS的句柄数限制:设置HBase和HDFS的句柄数限制

意见反馈

0/200

提交成功！非常感谢您的反馈，我们会继续努力做到更好反馈提交失败！请稍后重试！

推荐文章

解决方案
相关专题