检测到您已登录华为云国际站账号，为了您更好的体验，建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
检测到您已登录华为云国际站账号，为了您更好的体验，建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
组支持自定义标识主机组，可以管理动态扩缩容主机组。 日志结构化解析 ☆☆☆☆ ☆☆☆☆☆ ELK：基于采集器实现自定义日志结构化解析。 LTS：提供结构化解析能力，可以正则表达式、JSON、分隔符、自定义模板等方式解析日志。 日志搜索 关键词搜索、模糊搜索、快速分析 ☆☆☆☆☆ ☆☆☆☆☆
表1 日志流配置参数表 参数 说明 自动对日志流进行结构化配置和索引配置 开启该按钮，日志流结构化配置为ELB系统模板，索引配置时将所有ELB解析出来的字段打开快速分析按钮。配置结构化和索引后，才能对ELB日志进行SQL分析，并提供可视化图表。 自动为日志流添加标签：log_type=elb_7layer_access
平衡次数、重平衡原因及组详情。 前提条件 已采集DMS日志，详情请参见云防火墙CFW接入LTS。 日志配置结构化，详情请参见设置云端结构化解析日志。 DMS重平衡日志中心 登录云日志服务控制台。 在左侧导航栏中选择“仪表盘 ”。 在仪表盘模板下方，选择“DMS仪表盘模板 > DMS重平衡日志中心”，查看图表详情。
志文件上传至云日志服务 LTS。日志文件压缩上传到对象存储服务 OBS，通过函数工作流的OBS 触发器获取日志文件压缩包，并实现自动解压、解析日志文件，将日志结果逐行存储到云日志服务 LTS。适用于将业务系统日志上传至云日志服务 LTS进行管理的场景。
表1 日志流配置参数表 参数 说明 自动对日志流进行结构化配置和索引配置 开启该按钮，日志流结构化配置为CTS系统模板，索引配置时将所有CTS解析出来的字段打开快速分析按钮。配置结构化和索引后，才能对CTS日志进行SQL分析，并提供可视化图表。 单击“提交”。 父主题： 使用云服务接入LTS
日志流配置参数表 参数 说明 自动对日志流进行结构化配置和索引配置 开启该按钮，日志流结构化配置为APIG系统模板，索引配置时将所有APIG解析出来的字段打开快速分析按钮。配置结构化和索引后，才能对APIG日志进行SQL分析，并提供可视化图表。 自动为日志流添加标签：log_type=apig_access
表1 日志流配置参数表 参数 说明 自动对日志流进行结构化配置和索引配置 开启该按钮，日志流结构化配置为VPC系统模板，索引配置时将所有VPC解析出来的字段打开快速分析按钮。配置结构化和索引后，才能对VPC日志进行SQL分析，并提供可视化图表。 自动为日志流添加标签：log_type=vpc_flow
数、访问客户端数等图表。 前提条件 已采集DDS日志，详情请参见文档数据库服务DDS接入LTS。 日志配置结构化，详情请参见设置云端结构化解析日志。 DDS审计日志中心 登录云日志服务控制台，在左侧导航栏中选择“仪表盘”。 在仪表盘模板下方，选择“DDS仪表盘模板 > DDS审计日志中心”，查看图表详情。
S日志，DCS审计日志中心仪表盘支持展示访问用户数、访问客户端数、审计日志条数等图表。 前提条件 日志配置结构化，详情请参见设置云端结构化解析日志。 DCS审计日志中心 登录云日志服务控制台，在左侧导航栏中选择“仪表盘”。 在仪表盘模板下方，选择“DCS仪表盘模板 > DCS审计日志中心”，查看图表详情。
对主机日志采集设置具体的采集规则，具体可参考采集配置。 单击“下一步：索引配置”，使用默认设置。 单击“提交”，接入成功。 在日志流详情页面，单击，在“云端结构化解析”页面，选择“正则分析”提取方式，根据业务需求选择日志，将日志正文拆分成四个部分：Time1/ThreadName/Level/Message。
消费开始时间，纳秒值 Long 必填 - stopTime 消费结束时间，纳秒值 Long 选填 - jsonParse 是否对原始日志做json解析 Boolean 选填 false 类型映射 表3 类型映射 Flink字段类型 LTS字段类型 VARCHAR STRING 代码示例
详细加工语法请参考DSL数据加工语法（邀测）。 前提条件 已成功采集到日志。 对源日志内容已完成结构化配置，具体操作请参考设置云端结构化解析日志。 创建DSL加工任务 登录云日志服务控制台。 在左侧导航栏中选择“日志加工>DSL加工”，单击“新建DSL加工任务” 。 在基本信息
标日志组和日志流名称，进入日志详情页面。 系统获取ELB原始日志，在日志搜索页面查看具体日志。 单击右上角，在弹出页面中，选择“云端结构化解析”。 选择结构化模板，根据ELB模板进行结构化配置。其他日志内容可选择其他结构化模板。 在“可视化”页签下输入SQL查询语句对相应的字段进行查询，即可返回所需的日志内容。
主要展示加工任务ID、加工任务名称、输入行数、输出行数等信息。 前提条件 已创建DSL加工任务。 日志配置结构化，详情请参见设置云端结构化解析日志。 DSL加工任务监控中心 登录云日志服务控制台，在左侧导航栏中选择“仪表盘”。 在仪表盘模板下方，选择“DSL仪表盘模板 > DSL加工任务监控中心”，查看图表详情。
可能会根据使用的日志框架而有所不同，例如 Log4j，所以本文提供一个基于典型日志框架（如 Log4j）的示例，并对其中的一些通用字段进行解析。 系统日志示例。 2023-10-23 15:33:45,123 INFO [KafkaServer id=0] onBrokerStartup
标日志组和日志流。 支持两种方式创建快速分析： 单击进入设置详情页面，在索引配置页签的字段索引下方，添加字段时开启快速分析。 在云端结构化解析页签，开启自动配置索引和快速分析，默认是开启状态。开启后将使用结构化字段配置字段索引并打开快速分析。 在搜索分析页签，单击“创建快速分析”
左侧导航栏选择“主机管理 > 主机”，查看目标主机的ICAgent版本。详细请参见表2。 表2 ICAgent版本说明 版本号 说明 发布时间 5.12.232 解析标准输出日志用到的json库替换为sonic，降低CPU使用率。 LTS发送日志出现超时，解决超时问题。 2024-10-14 5.12.231
功能。 提供如下转储日志样例，方便进行流量统计举例说明：原始日志："192.168.0.1 200 190 /check" 该日志被结构化解析后为：{"ip":"192.168.0.1","status":200,"cost_time":190,"url":"/check"} 日志基础转储流量
Boolean 是否解析 index Integer 字段序号 表6 tag_fields_info 参数 参数类型 描述 fieldName String 字段名称 type String 字段类型 content String 内容 isAnalysis Boolean 是否解析 index
如果上一步的值是一个列表或JSON列表格式的字符串，则按照此列表分裂并结束处理。否则使用sep、quote或lstrip将上一步的值进行CSV解析，根据解析后的多个值进行分裂并结束处理。 参数说明 参数名称 参数类型 是否必填 说明 字段名 String 是 需要分裂的字段名。 sep String
长按/截图保存，微信识别二维码
或者关注公众号“华为云”
