检测到您已登录华为云国际站账号,为了您更好的体验,建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
页签下。 表4 日志采集配置参数说明 参数名称 参数说明 日志项目 选择已创建的日志项目,相同服务的不同日志使用同一个日志项目 日志空间 选择已创建的日志空间。选择日志空间时日志提取规则会展示日志空间定义的日志格式,采集的日志须满足对应格式。 配置名称 自定义日志采集配置名称。 配置类型
签下。 表4 日志采集配置参数说明 参数名称 参数说明 日志项目 选择已创建的日志项目,相同服务的不同日志使用同一个日志项目。 日志空间 选择已创建的日志空间。选择日志空间时日志提取规则会展示日志空间定义的日志格式,采集的日志须满足对应格式。 配置名称 自定义日志采集配置名称。 配置类型
在监控服务查看已接入日志 您可以通过本操作设置条件进行日志查询。 前提条件 已完成日志接入。 已完成创建导流任务。 操作步骤 进入AppStage运维中心。 在顶部导航栏选择服务。 单击,选择“运维 > 监控服务(ServiceInsight)”。 选择左侧导航栏的“日志 > 日志检索”。
并根据日志采集配置设置,通过filebeat采集虚拟机上的业务日志。 容器日志接入:安装daemonset插件,通过daemonset实现容器日志接入。 日志接入场景 表1 日志接入场景说明 场景 说明 日志接入方式 虚拟机日志 日志存储在虚拟机下的文件路径中。 虚拟机日志接入 容器hostPath日志
judge日志大小1KB,且不刷新日志内容 问题现象 judge日志大小1KB,且不刷新日志内容。 可能原因 告警原始表中存在字段值和字段类型不一致,导致解析失败。 解决方法 检查告警原始表中的数据是否有异常数据。 例如:数值类型的字段,值为NAN,可能是没有做除数为0的保护,修复异常,清理元数据,补数据后重新训练。
监控服务采集Linux主机监控指标操作流程 监控服务支持采集Linux主机各项监控指标,并以报表的形式呈现监控指标数据。 采集Linux主机监控指标操作流程 采集Linux主机监控指标操作流程如图1所示。 图1 操作流程 创建监控模板:监控服务提供_OS_DEFAULT监控模板,
找到变更使用的EAP流程,进入流程详情页,单击上方。 单击日志下的图标查看执行日志,如图图1所示。 图1 查看执行日志 在详细日志中找到如下日志: 找到service response所包含的内容,根据该内容定位问题。 父主题: 运维中心监控服务
接入并查看业务日志数据 日志接入运维中心监控服务 虚拟机日志接入监控服务 容器日志接入监控服务 在监控服务查看已接入日志 算子清洗功能介绍 父主题: 使用监控服务进行资源及业务监控
日志:完成主机日志接入,将日志接入监控服务中,接入后可以在“日志检索”页面查看已接入日志,具体操作请参见查看已接入日志。 监控:完成主机监控接入,为主机绑定监控模板,根据监控模板定义的插件采集主机监控数据,监控数据接入后可以在“虚机报表”页面查看,具体操作请参见查看虚机报表。 告警:完成
清理策略 设置文件清理策略,可单击“添加”,添加多条策略,也可以单击“克隆”后修改。 目录:输入目标主机或容器中需要清理日志的文件目录。 匹配正则:以shell正则匹配日志文件或文件夹,例如*.log。 匹配类型:以文件或文件夹进行匹配清理。 日志保留时间:文件或文件夹的保留时间,
在监控服务新增并管理实时监控页面 如果想指定应用及资源的实时监控数据,需要先新增实时监控页面,并为页面添加图表。 前提条件 已获取服务运维岗位权限或运维管理员权限,权限申请操作请参见申请权限。 新增实时监控页面 进入AppStage运维中心。 在顶部导航栏选择服务。 单击,选择“运维
周期性执行脚本,将指定文件中的业务告警数据,上报给HCW监控系统。 插件按行上报业务文件中的监控告警数据,告警上报的数据会根据id、application_id、service_id、level和source_tag信息生成一个唯一标识,该标识为告警的指纹信息,监控服务会依据指纹信息
导出作业输出或作业日志 支持导出已执行作业的输出或日志,并在“我的导出”页面查看。 导出作业输出或日志 进入AppStage运维中心。 在顶部导航栏选择服务。 单击,选择“运维 > 监控服务(ServiceInsight)”。 选择左侧导航栏的“EAP&JOB > 脚本执行 > 作业清单”。
作请参见申请权限。 为实时监控页面添加图表 进入实时监控页面。 进入AppStage运维中心。 在顶部导航栏选择服务。 单击,选择“运维 > 监控服务(ServiceInsight)”。 选择左侧导航栏的“监控 > 实时监控”。 进入已新增的实时监控页面。 在指标地图中选择服务或其他已使用的BaaS服务。
创建监控模板 监控服务提供_OS_DEFAULT监控模板,_OS_DEFAULT监控模板说明如表1所示,如果按主机绑定监控模板时会自动绑定该模板,用户也可以在“模板管理”页面创建本服务的监控模板,用户可以在模板内添加需要使用的插件,本章节介绍如何创建监控模板。 表1 _OS_DEFAULT监控模板说明
judge日志无法查看,提示get request error 问题现象 查看judge日志任务时,出现get request error错误提示。 可能原因 judge日志持续日志打印,单个文件过大时,打开或者下载会提示失败。 解决方法 依次单击“初始化Daemon”、“注册任
等待源文件上传成功,将源文件上传至作业平台,如图1所示。 表1 源文件参数说明 参数名称 参数说明 运维账号 选择运维账号或手动输入账号,用于连接目标机器(选择的资源)。 资源 选择资源机器,将源文件上传至该机器。 文件路径 输入源文件路径,即待分发文件的路径。 图1 上传文件 配置
按主机绑定监控模板 用户可以为主机绑定在模板管理定义的监控模板,绑定后监控服务会自动为该主机重启/重装agent,通过监控模板中的监控插件和agent采集主机监控数据。 前提条件 已创建监控模板。 已获取服务运维岗位权限或运维管理员权限,权限申请操作请参见申请权限。 使用限制 绑
按分组绑定监控模板 用户可以按分组绑定监控模板,绑定后监控服务会自动为分组下配置的主机重启/重装agent,通过监控模板中的监控插件和agent采集主机监控数据。 前提条件 已创建监控模板。 已获取服务运维岗位权限或运维管理员权限,权限申请操作请参见申请权限。 使用限制 绑定监控模板进
Filebeat是一个轻量级的采集器,用于采集和处理,转发日志数据。Filebeat将作为代理安装在您的服务器上,监控您指定的日志文件或位置,收集日志事件,并将它们转发到kafka,推送到下一个处理点。 processors是filebeat定义了一系列对单条日志操作的方法,目前支持三类操作: 减少导出字段的数量