应用运维管理 AOM-华为云

应用运维管理 AOM-Kafka Exporter接入:采集CCE集群的业务数据

采集CCE集群的业务数据通过新增PodMonitor方式为应用配置可观测监控Prometheus版的采集规则，监控部署在CCE集群内的应用的业务数据。如下指标采集的周期是30秒，所以等待大概30秒后才能在 AOM 的界面上查看到上报的指标。配置信息如下： apiVersion: monitoring.coreos.com/v1 kind: PodMonitor metadata: name: kafka-exporter namespace: default spec: namespaceSelector: matchNames: - default # exporter 所在的命名空间 podMetricsEndpoints: - interval: 30s path: /metrics port: metric-port selector: matchLabels: k8s-app: kafka-exporter

应用运维管理 AOM

应用运维管理 AOM-配置指标:更多操作

更多操作您还可以根据需要执行以下操作，具体请参见表相关操作。表5 相关操作操作说明改变指标排列顺序在“指标量（最近10分钟）”或“占比”列后单击，可改变指标在列表中的排列顺序。为默认排序，为按大小正序排序（即数据大的显示在最后方），为按大小倒序排序（即数据小的显示在最后方）。新增指标单击“新增指标”，在指标列表中选择需要新增的指标，单击“确定”。说明：单次新增指标最多支持新增100个指标。废弃指标废弃一个指标：选择一个指标，单击操作列的。废弃一个或多个指标：选中一个或多个指标前的复选框，在弹出框中选择“废弃”，可以废弃一个或多个指标。说明：单次废弃指标最多支持废弃100个指标。

应用运维管理 AOM 指标管理

应用运维管理 AOM-配置指标:注意事项

注意事项目前仅default类型、CCE类型、云服务类型、E CS 类型的Prometheus实例支持指标查看、新增和废弃功能。 default类型的Prometheus实例下，指标名以“aom_”、“apm_”开头以及资源类型为ICAgent的指标暂不支持废弃。 ECS类型的Prometheus实例仅支持展示和配置UniAgent插件采集的指标。 CCE类型的Prometheus实例仅支持废弃如下指标：只有在CCE “插件市场” 页面或AOM “集成中心” 页面安装的3.9.0以上的云原生监控插件（kube-prometheus-stack）上报的指标可以被废弃，且只有kube-prometheus-stack处于“运行中”状态时，指标才能废弃成功。查看kube-prometheus-stack插件状态的方法：登录CCE控制台，单击集群名称进入集群，在左侧导航栏中选择“插件中心”，在右侧找到“云原生监控插件”卡片，查看插件的状态。

应用运维管理 AOM 指标管理

应用运维管理 AOM-MySQL Exporter接入:采集CCE集群的业务数据

采集CCE集群的业务数据通过新增PodMonitor方式为应用配置可观测监控Prometheus版的采集规则，监控部署在CCE集群内的应用的业务数据。配置信息如下： apiVersion: monitoring.coreos.com/v1 kind: PodMonitor metadata: name: mysql-exporter namespace: default spec: namespaceSelector: matchNames: - default # exporter 所在的命名空间 podMetricsEndpoints: - interval: 30s path: /metrics port: metric-port selector: matchLabels: k8s-app: mysql-exporter

应用运维管理 AOM

应用运维管理 AOM-MySQL Exporter接入:数据库授权

数据库授权登录集群执行以下命令： kubectl exec -it ${mysql_podname} bash mysql -u root -p 图1 执行命令登录数据库，执行以下命令： CREATE USER 'exporter'@'x.x.x.x(hostip)' IDENTIFIED BY 'xxxx(password)' WITH MAX_USER_CONNECTIONS 3; GRANT PRO CES S, REPLICATION CLIENT, SELECT ON *.* TO 'exporter'@'x.x.x.x(hostip)'; 验证授权是否成功。输入以下命令查询sql，查看是否有exporter的数据，host为mysql所在节点的IP。 select user,host from mysql.user; 图2 查询sql

应用运维管理 AOM

应用运维管理 AOM-创建仪表盘:更多仪表盘操作

更多仪表盘操作仪表盘创建完成后，您还可以执行表5中的操作。表5 相关操作操作说明设置列表项在仪表盘列表右上角单击，通过选中/取消选中各展示项前的复选框，自定义列表项的展示/隐藏。收藏仪表盘选择一个仪表盘，单击“操作”列的。移动仪表盘分组移动一个仪表盘分组：选择一个仪表盘，单击“操作”列的，选择“移动分组”。批量移动仪表盘分组：选中多个仪表盘前的复选框，在弹出框中选择“移动分组”可修改仪表盘分组。删除仪表盘删除一个仪表盘：选择一个仪表盘，单击“操作”列的，选择“删除”。批量删除仪表盘：选中多个仪表盘前的复选框，在弹出框中选择“删除”可批量删除仪表盘。修改仪表盘分组名称在“仪表盘”列表，单击仪表盘名称。进入对应仪表盘页面，在“仪表盘”页面左上角，单击仪表盘名称。将光标移至待操作的仪表盘分组名称后，单击，选择“编辑”可修改分组名称。删除仪表盘分组删除仪表盘分组功能有两种入口方式：入口一：在“仪表盘”列表，单击仪表盘名称。进入对应仪表盘页面，在“仪表盘”页面左上角，单击仪表盘名称。将光标移至待操作的仪表盘分组名称后，单击，选择“删除”。在弹出框中单击“确定”，删除仪表盘分组。入口二：在仪表盘分组列表中，将光标移至需要删除的仪表盘分组名称后，单击，选择“删除”，在弹出框中单击“确定”，删除仪表盘分组。删除仪表盘中的图表选择待操作的仪表盘，在“仪表盘”页面右上角单击，将光标移至某个图表框右上角，单击，在下拉列表中选择“删除图表”。单击，将已创建图表删除。调整仪表盘中图表的位置选择待操作的仪表盘，在“仪表盘”页面右上角单击，将光标移至待操作的图表框内，选中该图表，可将该图表移动至仪表盘内任意位置。单击，调整当前图表布局。全屏显示选择待操作的仪表盘，在“仪表盘”页面右上角单击，可全屏显示仪表盘。退出全屏显示将光标移至屏幕上方，单击弹出的，或者单击，或者按键盘中的“Esc”可退出全屏模式。手动刷新选择待操作的仪表盘，在“仪表盘”页面右上角单击可手动刷新当前页面。自动刷新选择待操作的仪表盘，在“仪表盘”页面右上角单击后的下拉箭头，开启仪表盘自动刷新开关。手动刷新单个图表选择待操作的仪表盘，将光标移至某个图表框右上角，单击，在下拉列表中选择“刷新”，可手动刷新当前图表。修改单个图表选择待操作的仪表盘，将光标移至某一图表框右上角，单击，选择“编辑”，可修改图表数据，具体操作请参见添加图表至仪表盘。修改完成后，单击“确定”。在“仪表盘”页面右上角单击，保存修改结果。新增告警规则添加图表时，新增告警规则单击页面中的“添加图表”或单击页面右上角的。选择指标后，在指标列表右上方单击，可为当前添加的所有指标新增告警规则。具体操作请参见创建指标告警规则。修改图表时，新增告警规则选择待操作的仪表盘，将光标移至某一图表框右上角，单击，选择“编辑”。选择指标后，在指标列表右上方单击，可为当前添加的所有指标新增告警规则。具体操作请参见创建指标告警规则。全屏显示单个图表选择待操作的仪表盘，将光标移至某一图表框右上角，单击，选择“全屏”，可全屏显示图表数据。退出全屏显示单个图表将光标移至屏幕上方，单击弹出的，或者单击，选择“退出全屏”，或者按键盘中的“Esc”可退出全屏模式。轮播仪表盘选择待操作的仪表盘，在“仪表盘”页面右上角单击。具体操作请参见设置全屏模式在线时长。仪表盘设置选择待操作的仪表盘，在“仪表盘”页面右上角单击。具体操作请参见新增变量。查询时间设置选择待操作的仪表盘，在“仪表盘”页面右上角单击前面的下拉框，在下拉框可选择“近30分钟”、“近1小时”、“近6小时”、“近一天”、“近一周”、“自定义时间段”。若选择“自定义时间段”，在弹出日历表中选择对应的时间段，时间可精确至秒数。单击“确定”后，可根据选择时间查询仪表盘中所有图表数据。导出仪表盘可将该仪表盘的指标图表数据以JSON格式导出，并保存到本地便于进一步分析。导出仪表盘功能有两种入口方式：入口一：在仪表盘列表中，选择一个仪表盘，单击“操作”列的，选择“导出仪表盘”。入口二：选择待操作的仪表盘，在“仪表盘”页面右上角单击，并选择“导出仪表盘”。导入仪表盘将本地存储的JSON格式仪表盘数据导入AOM，便于在AOM上可视化分析。导入仪表盘功能有两种入口方式：入口一：在“仪表盘”页面，单击“导入仪表盘”。入口二：在仪表盘分组列表中，将光标移至需要导入仪表盘的的分组名称后，单击，选择“导入仪表盘”。导入方法：选择待导入的JSON格式仪表盘文件，上传或拖入“导入仪表盘”对话框的文本上传区域，然后单击“创建”。在“新建仪表盘”对话框，依次设置仪表盘名称等信息，具体请参见表1。设置完成，单击“创建”。导出监控报告选择待操作的仪表盘，在“仪表盘”页面右上角单击，选择“导出折线图监控报告”，可将该指标的折线图表以CSV格式导出，以便进行本地存储及进一步分析。表6 日志图表相关操作操作说明创建日志组输入日志组名称。日志组名称只支持输入英文、数字、中文、中划线、下划线及小数点，且不能以小数点、下划线开头或以小数点结尾。设置日志存储时间。存储时间默认为7天，可设置为1~30天内的时间节点。超出存储时间的日志将会被自动删除，您可以按需将日志数据转储至OBS桶中长期存储。单击“确定”完成创建。创建日志流输入日志流名称。日志流名称只支持输入英文、数字、中文、中划线、下划线及小数点，且不能以小数点、下划线开头或以小数点结尾。单击“确定”完成创建。

应用运维管理 AOM 仪表盘

应用运维管理 AOM-创建仪表盘:注意事项

注意事项系统预置的仪表盘模板都保存在“系统内置”分组下，包含容器、云服务、原生中间件、应用四种。预置仪表盘不允许删除或调整分组，仪表盘模板不支持创建。系统预置的容器类型仪表盘需要在CCE集群下的“插件管理”中安装“kube-prometheus-stack”插件后，才能正常使用。系统预置的原生中间件类型仪表盘需要在UniAgent中创建中间件采集任务后，才能正常使用。 1个区域中最多可创建1000个仪表盘分组。 1个区域中最多可创建1000个仪表盘。 1个仪表盘中最多可添加30个图表。 1个折线图最多支持展示200条指标数据。 1个数字图只能展示1个资源，最多可添加12个资源，默认展示第一个资源。

应用运维管理 AOM 仪表盘

应用运维管理 AOM-搜索日志:日志搜索的常用操作

日志搜索的常用操作日志搜索的常用操作有添加告警、选择时间段展示日志、刷新等操作，具体请参见表1。表1 常用操作操作说明创建快速查询单击，创建快速查询。刷新日志单击对日志进行刷新，有两种方式刷新方式：手动刷新和自动刷新。手动刷新：单击“手动刷新”可直接对日志进行刷新自动刷新：选择自动刷新的间隔时间，将对日志进行自动刷新。间隔时间范围为15秒、30秒、1分钟和5分钟。复制单击，复制日志内容。查看上下文单击，查看日志上下文。简化字段详情单击，查看简化字段详情。换行单击换行，开启换行功能后，搜索的日志内容将换行显示。说明：默认换行开启，默认展示行数为2行。下载日志单击“”，在弹出的下载日志页面中进行本地下载。本地下载：将日志文件直接下载到本地，单次下载支持最大5000条日志。在下拉框中选择“.csv”或“.txt”，单击“开始下载日志”，可将日志导出至本地。说明：选择以CSV格式导出日志后，本地以表格形式保存日志的具体标签信息。选择导出TXT格式日志后，本地会以.txt格式保存日志的日志内容。 JSON设置鼠标悬浮在按钮上，单击“JSON设置”，在弹出的JSON设置页面中，设置格式化显示。说明：默认开启格式化，JSON默认展开层级为2层。开启格式化按钮：设置JSON默认展开层级，最大设置为10层。关闭格式化按钮：对于JSON格式的日志，将不会格式化层级显示。日志折叠设置鼠标悬浮在按钮上，单击“日志折叠设置”，在弹出的日志折叠设置页面中，设置长日志字符个数。日志超过设置的长日志字符个数时，超出字符将被隐藏，单击“展开”按钮可查看全部内容。说明：默认开启自动折叠长日志，字符个数默认为400个。日志时间展示鼠标悬浮在按钮上，单击“日志时间展示”，在弹出的日志折叠设置页面中，设置是否展示毫秒、是否展示时区。说明：默认开启展示毫秒。

应用运维管理 AOM 日志流

应用运维管理 AOM-基本概念

基本概念本文汇总使用Prometheus监控过程中涉及的基本概念，方便您查询和了解相关概念。表1 基本概念概念说明 Exporter 一个采集监控数据并通过Prometheus监控功能规范对外提供数据的组件。目前有上百个官方或者第三方 Exporter可供使用，具体请参见Exporter详情。 Target Prometheus探针要抓取的采集目标。采集目标暴露自身运行、业务指标，或者代理暴露监控对象的运行、业务指标。 Job 一组Target的配置集合。定义了抓取间隔，访问限制等作用于一组Target的抓取行为。 Prometheus 监控 Prometheus监控全面对接开源Prometheus生态，支持类型丰富的组件监控，提供多种开箱即用的预置监控大盘和全面托管的Prometheus服务。 Prometheus实例 Prometheus监控功能提供的管理Prometheus数据采集和数据存储分析的逻辑单元。 Prometheus探针部署在用户侧或者云产品侧Kubernetes集群。负责自动发现采集目标、采集指标和远程写到其他库。 PromQL Prometheus监控的查询语言。支持瞬时查询和时间跨度查询，内置多种函数和操作符。可以对原始数据进行聚合、切片、预测和联合。 Sample 一条时间线在某个时间点对应的数值。在Prometheus监控服务中，每个Sample由一个float64数据类型的值和一个毫秒精度的时间戳构成。告警规则 Prometheus监控Alerting Rule格式的告警配置。可以通过PromQL描述。标签描述指标的一组Key-Value值。服务发现 Prometheus监控的功能特点之一，无需静态配置，可以自动发现采集目标。支持Kubernetes SD、Consul、Eureka等多种服务发现方式，支持通过ServiceMonitor、PodMonitor的方式暴露采集目标。预聚合 Prometheus监控的Recording Rule能力。可以通过PromQL将原始数据加工成新的指标，提升查询效率。时间序列由指标名和标签组成。属于同一指标和同一组标签维度的带时间戳的流。远程存储自研的时序数据存储组件。支持Prometheus监控的Remote Write协议，由云产品全面托管。云产品监控无缝集成了多种云产品的监控数据。用户如果有云产品的监控需求，可以通过接入云产品监控实施。指标采集目标暴露的、可以完整反映监控对象运行或者业务状态的一系列标签化数据。Prometheus监控采用OpenMetrics的标准数据格式描述指标。父主题： Prometheus监控简介

应用运维管理 AOM Prometheus监控简介

应用运维管理 AOM-ElasticSearch Exporter接入:采集CCE集群的业务数据

采集CCE集群的业务数据通过新增PodMonitor方式为应用配置可观测监控Prometheus版的采集规则，监控部署在CCE集群内的应用的业务数据。如下示例中指标采集的周期是30秒，所以等待大概30秒后才能在AOM的界面上查看到上报的指标。 apiVersion: monitoring.coreos.com/v1 kind: PodMonitor metadata: name: elasticSearch-exporter namespace: default spec: namespaceSelector: # 选择监控Exporter部署所在的namespace matchNames: - default # exporter所在的命名空间 podMetricsEndpoints: - interval: 30s # 设置指标采集周期 path: /metrics # 填写Prometheus Exporter对应的Path的值，默认/metrics port: metric-port # 填写Prometheus Exporter对应YAML的ports的name selector: # 填写要监控Exporter Pod的Label标签，以定位目标Exporter matchLabels: k8s-app: elasticSearch-exporter

应用运维管理 AOM

应用运维管理 AOM-ElasticSearch Exporter接入:操作场景

操作场景使用ElasticSearch过程中需要对ElasticSearch运行状态进行监控，例如集群及索引状态等。Prometheus监控服务提供了CCE容器场景下基于Exporter的方式来监控ElasticSearch运行状态。本文介绍如何部署ElasticSearch Exporter以及实现ElasticSearch Exporter告警接入等操作。为了方便安装管理Exporter，推荐使用CCE进行统一管理。

应用运维管理 AOM

应用运维管理 AOM-接入中心总览:Prometheus 运行环境接入

Prometheus 运行环境接入通过该功能可将CCE 、CCI容器指标和ECS虚机指标上报到AOM。登录AOM 2.0控制台。在左侧导航栏中选择“接入中心”。在右侧“Prometheus 运行环境”面板单击需要接入的指标卡片。云容器引擎CCE 在购买后集群后默认已经安装ICAgent，自动将CCE集群指标上报到AOM，用户无需手动接入。单击“云容器引擎 CCE (ICAgent)”卡片，可查看已接入的CCE集群指标。自动上报到AOM的CCE集群指标，详细说明请参见基础指标-虚机指标。云容器实例CCI服务默认自动将指标上报到AOM，其指标数据开箱即用。用户无需手动接入。单击“云容器实例 CCI”卡片，可查看已接入的CCI指标。自动上报到AOM的CCI指标，详细说明请参见基础指标-虚机指标。单击“ECS ICAgent (Old)”卡片，在“采集管理”界面，单击“安装UniAgent”，为ECS主机安装UniAgent。 UniAgent成功安装后，会自动上报ECS虚机指标到AOM。ECS虚机指标的详细说明请参见基础指标-虚机指标。

应用运维管理 AOM 接入中心

应用运维管理 AOM-接入中心总览:开源监控系统接入

开源监控系统接入该功能适合已自建了Prometheus Server，但需要通过远端存储（Remote Write）方式来解决Prometheus存储的可用性和可扩展性场景。登录AOM 2.0控制台。在左侧导航栏中选择“接入中心” 在右侧“开源监控系统”面板单击“Prometheus for Remote Write”卡片。在弹出的“创建Prometheus实例”对话框中，创建Remote Write Prometheus实例。

应用运维管理 AOM 接入中心

应用运维管理 AOM-接入中心总览:业务层接入

业务层接入通过该功能可获取提取的ELB日志、事务监控或上报的自定义指标，例如用户数、订单数。登录AOM 2.0控制台。在左侧导航栏中选择“接入中心”。在右侧“业务层”面板单击需要接入的指标卡片。单击“基于ELB日志”卡片，在“日志指标规则”界面接入相关的ELB日志指标，具体操作请参见创建日志指标规则。单击“基于 APM 事务”卡片，在“接入应用”界面接入相关的APM事务指标，具体操作请参见Agent管理。单击“Browser监控”卡片，在“前端站点”页面，单击“接入前端站点”接入相关的前端站点指标，具体操作请参见接入前端站点。

应用运维管理 AOM 接入中心

应用运维管理 AOM-接入中心总览:Prometheus 中间件接入

Prometheus 中间件接入通过该功能可接入原生中间件或云中间件指标，例如文件系统容量、文件系统使用率。登录AOM 2.0控制台。在左侧导航栏中选择“接入中心”。在右侧“Prometheus 中间件”面板单击需要接入的指标卡片。在“安装步骤”页签，可以配置采集任务和安装Exporter，具体操作请参见虚机场景Exporter接入。在“采集任务”页签，可以对此中间件的采集任务进行查看、启停、编辑、删除等操作，具体操作请参见其他相关操作。

应用运维管理 AOM 接入中心

云服务器内容精选

应用运维管理 AOM

7*24

备案

专业服务

退订

建议反馈

售前咨询热线