查看MRS集群监控指标-华为云

MAPREDUCE服务 MRS-查看MRS集群资源监控指标:通过Manager查看集群监控（MRS 2.x及之前版本）

通过Manager查看集群监控（ MRS 2.x及之前版本）登录Manager页面，选择“系统概览”。在“时间区间”选择需要查看监控数据的时间段。可供选择的选项如下：实时、最近3小时、最近6小时、最近24小时、最近一周、最近一个月、最近三个月、最近六个月、自定义（选择自定义时，在时间范围内自行选择需要查看的时间）。单击“查看”可以查看相应时间区间的监控数据。 MRS Manager在“服务概览”显示各个服务的“健康状态”和“角色数”。单击曲线图表上侧的图标，可显示具体的指标说明信息。自定义监控指标报表。单击“定制”，勾选需要在MRS Manager显示的监控指标。单击“确定”保存并显示所选指标。单击“清除”可批量取消全部选中的指标项。 MRS Manager支持统计的指标共14个，界面最多显示12个定制的监控指标。用户可以选择页面自动刷新间隔的设置，也可以单击马上刷新。勾选“全屏”会将“系统概览”窗口最大化。支持三种参数值： “每60秒刷新一次”：刷新间隔60秒。 “每120秒刷新一次”：刷新间隔120秒。 “停止刷新”：停止刷新。导出监控指标报表。选择报表的时间范围。可供选择的选项如下，单击“导出”，Manager将生成指定时间范围内、已勾选的集群监控指标报表文件，请选择一个位置保存，并妥善保管该文件。如果需要查看指定时间范围的监控指标对应的分布曲线图，请单击“查看”，界面将显示用户自定义时间范围内选定指标的分布曲线图。用户需要了解服务和主机关键监控指标中最高、最低或平均监控数据形成的曲线，即资源分布情况时，可以在MRS Manager上查看，支持查询1小时以内的监控数据。用户也可以在MRS Manager上修改资源分布，使服务和主机的资源分布图表中，可以按自定义的数值显示一条或多条最高、最低监控数据形成的曲线。部分监控指标的资源分布不记录。查看服务监控指标的资源分布在MRS Manager，单击“服务管理”。单击服务列表中指定的服务名称。单击“资源贡献排名”。 “指标”中选择服务的关键指标，MRS Manager将显示过去1小时内指标的资源分布情况。查看主机监控指标的资源分布在MRS Manager，单击“主机管理”。单击主机列表中指定的主机名称。单击“资源贡献排名”。 “指标”中选择主机的关键指标，MRS Manager将显示过去1小时内指标的资源分布情况。配置资源分布在MRS Manager，单击“系统设置”。在“配置”区域“监控和告警配置”下，单击“资源贡献排名配置”。修改资源分布的显示数量。最大值与最小值的资源分布显示数量总和不能大于5。 “TOP数量”填写最大值的显示数量。 “BOTTOM数量”填写最小值的显示数量。单击“确定”保存设置。界面右上角提示“保存TOP数量和BOTTOM数量成功。”。

MAPREDUCE服务 MRS 查看MRS集群监控指标

MAPREDUCE服务 MRS-查看MRS集群资源监控指标:通过管理控制台查看集群监控

通过管理控制台查看集群监控登录MRS管理控制台。选择“现有集群”，选中一个运行中的集群并单击集群名称，进入集群信息页面。在“概览”页签单击“ IAM 用户同步”右侧的“单击同步”进行IAM用户同步。用户同步完成后，单击“监控信息”页签，查看到集群的监控指标报表。在时间区间选择需要查看监控数据的时间段。自定义监控指标报表。单击“定制”，勾选需要显示的监控指标。单击“确定”保存并显示所选指标。单击“清除全部”可批量取消全部选中的指标项。导出监控指标报表。选择报表的时间范围。单击“导出”，MRS将生成指定时间范围内、已勾选的集群监控指标报表文件，请选择一个位置保存，并妥善保管该文件。

MAPREDUCE服务 MRS 查看MRS集群监控指标

MAPREDUCE服务 MRS-查看MRS集群资源监控指标:通过Manager查看集群监控（MRS 3.x及之后版本）

通过Manager查看集群监控（MRS 3.x及之后版本）登录集群Manager界面。单击“主页”。在图表区的右上角，单击，在弹出菜单中选择“定制”。监控时段以5分钟为单位，显示最近1小时的监控数据；从进入“实时监控”页面后，在监控图右侧以5分钟为单位显示实时监控数据。在窗口左侧分类中，选择一项监控资源主体，然后勾选一个或多个监控指标。图1 自定义监控指标报表单击“确定”即可查看对应的监控指标详情。导出监控指标报表。导出全部监控数据在“主页”选择所需要操作的集群的图表区的右上角，选择一个时间范围获取监控数据，例如“1周”。默认为实时数据，无法导出。单击可以自定义监控数据时间范围。在图表区的右上角，单击，在弹出菜单中选择“导出” 导出指定监控项数据在“主页”选择所需要操作的集群的图表区任意一个监控报表窗格的右上角，单击。选择一个时间范围获取监控数据，例如“1周”。默认为实时数据，无法导出。单击可以自定义监控数据时间范围。图2 指定监控项自定义时间范围单击“导出”。历史报表根据所自定义的时间长度不同，图表横轴中每个时间间隔也会不同，具体监控数据的规则如下：如果 FusionInsight Manager存储所用的 GaussDB 所在分区的磁盘使用率超过80%时，会清理实时监控数据和周期为5分钟的监控数据。若为“租户资源”下的“存储资源(HDFS)”表，0小时～300小时：每个间隔1小时，要求集群至少安装1小时以上，最多保留3个月监控数据。 MRS 3.3.0之前版本集群： 0～25小时：每个间隔5分钟，要求集群至少安装10分钟以上，最多保留15天监控数据。 25小时～150小时：每个间隔30分钟，要求集群至少安装30分钟以上，最多保留3个月监控数据。 150小时～300小时：每个间隔1小时，要求集群至少安装1小时以上，最多保留3个月监控数据。 300小时～300天：每个间隔1天，要求集群至少安装1天以上，最多保留6个月监控数据。 300天以上：每个间隔7天，要求集群安装7天以上，最多保留一年的监控数据。 MRS 3.3.0及之后版本集群： 0～21小时20分：每个间隔5分钟，要求集群至少安装10分钟以上，最多保留90天监控数据。 21小时20分～128小时：每个间隔30分钟，要求集群至少安装30分钟以上，最多保留90天监控数据。 128小时～256小时：每个间隔1小时，要求集群至少安装1小时以上，最多保留90天监控数据。 256小时～256天及以上：每个间隔1天，要求集群至少安装1天以上，最多保留90天监控数据。

MAPREDUCE服务 MRS 查看MRS集群监控指标

MAPREDUCE服务 MRS-查看MRS集群节点资源监控指标:查看主机监控图表信息

查看主机监控图表信息通过MRS管理控制台查看：登录MRS管理控制台。选择“现有集群”，选中一个运行中的集群并单击集群名称，进入集群信息页面。单击“节点管理”并展开节点组信息，查看所有主机状态。主机列表中包括节点名称/资源ID、IP、状态、规格、云硬盘、可用区等信息。单击列表中指定的节点名称，查看单个节点状态及指标。单击“监控”页签，可以查看当前节点的监控图表信息。通过Manager查看： MRS 3.x及之后版本登录FusionInsight Manager。单击“主机”，查看主机列表信息。在主机列表单击指定的主机名称，查看主机概览信息。在主机详情页面，主要包含基本信息区、磁盘状态区、实例列表区和监控图表等。单击“图表”页签，可直接查看该主机的全量监控图表信息。图表页面可直接查看该主机的全量监控图表信息 MRS 2.x及之前版本登录MRS Manager。单击“主机管理”，看所有主机状态。单击列表中指定的主机名称，查看单个主机状态及指标。定制、导出监控图表。在“图表”区域框中，单击“定制”自定义服务监控指标。在“时间区间”选择查询时间，单击“查看”显示该时间段内的监控数据。单击“导出”，导出当前查看的指标数据。

MAPREDUCE服务 MRS 查看MRS集群监控指标

MAPREDUCE服务 MRS-查看MRS集群组件监控指标:通过管理控制台查看组件监控

通过管理控制台查看组件监控登录MRS控制台。选择“现有集群”，单击集群名称进入集群详情页面。在“概览”页签单击“IAM用户同步”右侧的“单击同步”进行IAM用户同步。在MRS集群详情页面，单击“组件管理”。查看组件监控。单击列表中指定服务名称，查看服务状态及指标信息。定制、查看组件级别监控图表。在“图表”区域框中，单击“定制”自定义服务监控指标。在“时间区间”选择查询时间，单击“查看”显示该时间段内的监控数据。查看角色实例监控。在组件列表中单击服务指定名称。单击“实例”，查看组件内的各角色实例状态。支持在列表右上角筛选相同角色的全部实例。单击“高级搜索”，在角色搜索区域中设置搜索条件，单击“搜索”，查看指定的角色信息。单击“重置”清除输入的搜索条件。支持模糊搜索条件的部分字符。单击列表中指定角色实例名称，查看角色实例状态及指标信息。定制、查看监控图表。在“图表”区域框中，单击“定制”自定义服务监控指标。在“时间区间”选择查询时间，单击“查看”显示该时间段内的监控数据。

MAPREDUCE服务 MRS 查看MRS集群监控指标

MAPREDUCE服务 MRS-配置MRS集群监控指标数据转储:监控指标数据转储介绍

监控指标数据转储介绍监控数据上报功能可以将系统中采集到的监控数据写入到文本文件，并以FTP或SFTP的形式上传到指定的服务器中。用户可以在Manager界面上配置监控指标数据对接参数，使集群内各监控指标数据保存到指定的FTP服务器，与第三方系统进行对接。 FTP协议未加密数据可能存在安全风险，建议使用SFTP。转储服务器对应的弹性云服务器需要和MRS集群的Master节点在相同的VPC，且Master节点可以访问转储服务器的IP地址和指定端口。转储服务器的FTP服务正常。 Manager支持采集当前管理的集群内所有监控指标数据，采集周期有30秒、60秒和300秒三种。监控指标数据在FTP服务器保存时，会根据采集周期分别保存在不同的监控文件中。表1 监控指标数据文件说明监控指标数据描述采集周期 30s周期：默认采集周期为30s的实时指标。 60s周期：默认采集周期为60s的实时指标。 300s周期：非30s、60s采集的所有指标。文件名格式 MRS 3.x及之后版本： metric_监控指标数据采集的周期_文件创建时间.log 如：metric_60_20160908085915.log、metric_300_20160908085613.log MRS 3.x之前版本：集群名称_metric_监控指标数据采集的周期_文件创建时间.log 文件内容格式（以MRS 3.x版本为例）集群ID|集群名称|显示名称|服务名称|指标ID|采集时间|采集主机@m@子指标|单位|指标值示例：实际的文件中不存在对应的文件格式标题。 1|xx1|Host|Host|10000413|2019/06/18 10:05:00|10-66-254-146|KB/s|309.910 1|xx1|Host|Host|10000413|2019/06/18 10:05:00|10-66-254-152|KB/s|72.870 2|xx2|Host|Host|10000413|2019/06/18 10:05:00|10-66-254-163|KB/s|100.650 第三方系统从上报的文件内容中解析出指标ID后，可以通过查询位于主备 OMS 节点的“FusionInsight安装路径/om-server/om/etc/om/all-shown-metric-zh_CN”指标全集文件获取指标详细信息，该文件包含了所有指标的详细信息，内容如下（以MRS 3.x版本为例）：实时指标ID,5分钟指标ID,指标名称,指标采集周期(秒),是否默认采集,指标所属服务,指标所属角色 00101,10000101,JobHistoryServer非堆内存使用量,30,false,Mapreduce,JobHistoryServer 00102,10000102,JobHistoryServer非堆内存分配量,30,false,Mapreduce,JobHistoryServer 00103,10000103,JobHistoryServer堆内存使用量,30,false,Mapreduce,JobHistoryServer 00104,10000104,JobHistoryServer堆内存分配量,30,false,Mapreduce,JobHistoryServer 00105,10000105,阻塞线程数,30,false,Mapreduce,JobHistoryServer 00106,10000106,运行线程数,30,false,Mapreduce,JobHistoryServer 00107,10000107,GC时间,30,false,Mapreduce,JobHistoryServer 00110,10000110,JobHistoryServer的CPU使用率,30,false,Mapreduce,JobHistoryServer ... 解析指标ID说明：针对采集周期为30s/60s的指标，参考该指标说明文件的是第1列，即实时指标ID即可找到对应的指标说明。针对采集周期为300s的指标，参考该指标说明文件对应的第2列，即5分钟指标ID即可找到对应的指标说明。部分字段说明：实时指标ID：指标的采集周期为30s/60s的指标ID，一个独立的指标项只可能存在30s或者60s的实时指标项。 5分钟指标ID：指标对应的5分钟（300s）的指标ID。指标采集周期(秒)：主要是针对实时指标的采集周期，可选值为30或60。指标所属服务：指标所属的服务名名称，标明指标所属的服务类型，如HDFS、HBase等。指标所属角色：指标所属的角色名名称，标明指标所属的实际角色类型，如JobServer、RegionServer等。

MAPREDUCE服务 MRS 查看MRS集群监控指标

MAPREDUCE服务 MRS-配置MRS集群监控指标数据转储:配置MRS集群监控指标数据转储（MRS 2.x及之前版本）

配置MRS集群监控指标数据转储（MRS 2.x及之前版本）在MRS Manager，单击“系统设置”。在“配置”区域“监控和告警配置”下，单击“监控指标转储配置”。表3介绍转储参数。表3 转储参数参数名称参数说明是否必选监控指标转储开关指定是否打开监控指标数据对接功能。是 FTP IP地址指定监控指标数据对接后存放监控文件的FTP服务器。是 FTP端口指定连接FTP服务器的端口。是 FTP用户名指定登录FTP服务器的用户名。是 FTP密码指定登录FTP服务器的密码。是保存路径指定监控文件在FTP服务器保存的路径。是转储时间间隔（秒）指定监控文件在FTP服务器保存的周期，单位为秒。配置完成后，系统会按照指定的时间间隔，将文件定期上传到对应的FTP服务器。是转储模式指定监控文件发送时使用的协议。可选协议为“FTP”和“SFTP”。是 SFTP服务公钥指定FTP服务器的公共密钥，“模式”选择“SFTP”时此参数生效。建议配置公共密钥，否则可能存在安全风险。否单击“确定”，设置完成。

MAPREDUCE服务 MRS 查看MRS集群监控指标

云服务器内容精选

查看MRS集群监控指标

7*24

备案

专业服务

退订

建议反馈

售前咨询热线