检测到您已登录华为云国际站账号,为了您更好的体验,建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
”,单击图表区域右上角的下拉菜单,选择“定制 > 资源”,勾选“NameNode内存使用详情”。查看直接内存使用情况。 查看NameNode使用的直接内存是否已达到NameNode设定的最大直接内存的90%(默认阈值)。 是,执行4。 否,执行8。 在FusionInsight Manager首页,选择“集群
如何在CarbonData中配置非安全内存? 问题 如何在CarbonData中配置非安全内存? 回答 在Spark配置中,“spark.yarn.executor.memoryOverhead”参数的值应大于CarbonData配置参数“sort.inmemory.size.inmb”
选择“定制 > 资源”,勾选“NodeManager内存使用率”。查看直接内存使用情况。 图1 定制NodeManager内存使用率 查看NodeManager使用的直接内存是否已达到NodeManager设定的最大直接内存的90%(默认阈值)。 是,执行4。 否,执行9。 在FusionInsight
务状态的查询,可能导致查询结果不准确。 查看告警信息,是否存在告警“ALM-18009 JobHistoryServer堆内存使用率超过阈值”。 是,查看“ALM-18009 JobHistoryServer堆内存使用率超过阈值”进行处理。 否,执行8。 观察界面告警是否清除。 是,处理完毕。
实例”,选择上报告警实例主机名对应的角色,单击图表区域右上角的下拉菜单,选择“定制”,勾选“内存”中的“Loader堆内存使用率”,单击“确定”。 图1 Loader堆内存使用率 查看Loader使用的堆内存是否已达到Loader设定的阈值(默认值为最大堆内存的95%)。 是,执行4。 否,执行6。 在FusionInsight
拉菜单,选择“定制 > CPU和内存 > RangerAdmin直接内存使用率”,单击“确定”。 图1 RangerAdmin直接内存使用率 查看RangerAdmin使用的直接内存是否已达到RangerAdmin设定的阈值(默认值为最大直接内存的80%)。 是,执行4。 否,执行6。
实例”,选择上报告警实例主机名对应的角色,单击图表区域右上角的下拉菜单,选择“定制 > 内存”中的“Oozie直接内存使用率”,单击“确定”。 图1 定制Oozie直接内存使用率 查看Oozie使用的直接内存是否已达到Oozie设定的阈值(默认值为最大直接内存的80%)。 是,执行4。 否,执行6。 在FusionInsight
的下拉菜单,选择“定制 > CPU和内存 > RangerAdmin堆内存使用率”,单击“确定”。 图1 RangerAdmin堆内存使用率 查看RangerAdmin使用的堆内存是否已达到RangerAdmin设定的阈值(默认值为最大堆内存的95%)。 是,执行4。 否,执行6。
制 > CPU和内存 > TagSync直接内存使用率”,单击“确定”。 图1 TagSync直接内存使用率 查看TagSync使用的直接内存是否已达到TagSync设定的阈值(默认值为最大直接内存的80%)。 是,执行4。 否,执行6。 在FusionInsight Manager首页,选择“集群
的下拉菜单,选择“定制 > CPU和内存 > PolicySync直接内存使用率”,单击“确定”。 图1 PolicySync直接内存使用率 查看PolicySync使用的直接内存是否已达到PolicySync设定的阈值(默认值为最大直接内存的90%)。 是,执行4。 否,执行6。
选择“定制 > 进程 > Kafka直接内存使用率”,单击“确定”。 图1 Kafka直接内存使用率 查看Kafka使用的直接内存是否已达到Kafka设定的最大直接内存的80%。 是,执行4。 否,执行7。 检查Kafka配置的直接内存大小。 在FusionInsight Manager首页,选择“集群
实例”,选择上报告警实例主机名对应的角色,单击图表区域右上角的下拉菜单,选择“定制 > 内存”中的“Oozie堆内存使用率”,单击“确定”。 图1 定制Oozie堆内存使用率 查看Oozie使用的堆内存是否已达到Oozie设定的阈值(默认值为最大堆内存的95%)。 是,执行4。 否,执行6。 在FusionInsight
击图表区域右上角的下拉菜单,选择“定制 > CPU 和内存”,勾选“ZooKeeper堆内存与直接内存使用率”,单击“确定”,查看堆内存使用情况。 查看ZooKeeper使用的堆内存是否已达到ZooKeeper设定的最大堆内存的95%。 是,执行4。 否,执行7。 在FusionInsight
的下拉菜单,选择“定制 > CPU和内存 > PolicySync非堆内存使用率”,单击“确定”。 图1 PolicySync非堆内存使用率 查看PolicySync使用的非堆内存是否已达到PolicySync设定的阈值(默认值为最大非堆内存的90%)。 是,执行4。 否,执行6。
> 定位信息”。查看告警上报的实例的IP地址。 单击“组件管理 > Kafka > 实例 > Broker(对应上报告警实例IP地址) > 定制 > Kafka堆内存资源状况”。查看堆内存使用情况。 查看Kafka使用的堆内存是否已达到Kafka设定的最大堆内存的80%。 是,执行1
选中“告警ID”为“43008”的告警,查看“定位信息”中的实例的IP地址及角色名。 单击“组件管理 > Spark > 实例 > JobHistory(对应上报告警实例IP地址) > 定制 > JobHistory直接内存”。单击“确定”,查看直接内存使用情况。 查看JobHistory直接内存是否已达到Jo
问题背景与现象 通过客户端提交任务,客户端返回内存溢出的报错结果: 原因分析 从报错堆栈可以看出是任务在提交过程中分片时在读取HDFS文件阶段内存溢出了,一般是由于该任务要读取的小文件很多导致内存不足。 解决办法 排查启动的MapReduce任务是否对应的HDFS文件个数很多,如果很多,
JobHistory进程堆内存使用率过高,会影响JobHistory进程运行的性能,甚至造成内存溢出导致JobHistory进程不可用。 可能原因 该节点JobHistory进程堆内存使用率过大,或配置的堆内存不合理,导致使用率超过阈值。 处理步骤 检查堆内存使用率。 登录MRS集群详情页面,选择“告警管理”。
Impalad的xmx内存小于catalog的xmx内存,Impalad节点持续报Full GC,SQL一直处于created状态 问题 Impalad的xmx内存小于Catalog的xmx内存,catalog长期运行,内存已经超过了impalad的xmx 内存,Impalad节点持续报Full
实例”,选择上报告警实例主机名对应的角色,单击图表区域右上角的下拉菜单,选择“定制 > 内存”中的“Oozie非堆内存使用率”,单击“确定”。 图1 定制Oozie非堆内存使用率 查看Oozie使用的非堆内存是否已达到Oozie设定的阈值(默认值为最大非堆内存的80%)。 是,执行4。 否,执行6。 在FusionInsight