MAPREDUCE服务 MRS-MRS集群节点类型说明

时间:2024-08-18 05:14:17

MRS 集群节点类型说明

MRS集群由多个弹性云服务器节点组成,根据节点的不同规格,系统以节点组的方式进行管理,不同的节点组一般选用不同的云服务器规格。

根据节点上部署的组件角色的不同,集群内的节点类型可分为Master节点、Core节点、Task节点。

表1 集群节点分类

节点类型

功能

Master节点

MRS集群管理节点,节点上部署 OMS Server负责管理和监控集群。

在MRS集群创建成功后,集群内的节点名称中包含“master1”的节点为Master1节点,名称中包含“master2”的节点为Master2节点。

Master节点可以通过弹性云服务器界面的VNC方式登录,也可以通过SSH方式登录,并且Master节点可以免密码登录到其他节点。

系统自动将Master节点标记为主备管理节点,并支持MRS集群管理的高可用特性。如果主管理节点无法提供服务,则备管理节点会自动切换为主管理节点并继续提供服务。

查看Master1节点是否为主管理节点,请参见查看MRS集群主备管理节点

Core节点

MRS集群工作节点,负责处理和分析数据,并存储过程数据。

在MRS集群详情的“节点管理”页面,节点类型包含“Core”的节点组所包含的节点为Core节点。

Task节点

计算节点,集群计算资源不足时通过配置弹性伸缩策略实现自动扩缩容。

在MRS集群详情的“节点管理”页面,节点类型为“Task”的节点组所包含的节点为Task节点。

如果数据节点组内除基础必选角色外仅部署了NodeManager(Yarn)角色或Supervisor(Storm)角色,则该节点组为Task类型节点组。

MRS集群节点支持用户远程登录,远程登录包含界面登录和SSH登录两种方式:

  • 界面登录:直接通过弹性云服务器管理控制台提供的远程登录功能,登录到集群节点的Linux命令行操作界面。
  • SSH登录:仅适用于Linux弹性云服务器,您可以使用远程登录工具(例如PuTTY)登录弹性云服务器,此时需要该弹性云服务器绑定弹性IP地址。

    集群节点申请和绑定弹性IP,请参见申请EIP并绑定至E CS

    可以使用密钥方式也可以使用密码方式登录Linux弹性云服务器,详情请参见登录MRS集群节点

support.huaweicloud.com/usermanual-mrs/mrs_01_0081.html