云日志服务 LTS-ICAgent结构化解析规则说明:JSON

时间:2024-12-25 16:20:09

JSON

适用JSON格式的日志,通过提取JSON字段将其拆分为键值对。

  1. 选择JSON格式。
  2. 日志过滤默认关闭,可根据需要打开日志过滤,进行添加白名单规则或黑名单规则,白名单规则或黑名单规则添加上限为20个。
    图6 日志过滤规则
    • 开启日志过滤才需要设置,添加白名单规则。

      您可以添加过滤规则筛选出有价值的日志数据,过滤规则为正则表达式,应用到指定Key的Value。所创建的过滤规则为命中规则,即匹配上正则表达式的日志才会被采集上报。

      1. 单击“添加”,填写Key值和过滤规则(正则表达式)。Key值为日志字段名称,多条过滤规则之间关系是“或”逻辑。例如采集日志源文件中包含hello的日志,可配置采集规则为.*hello.*
      2. 单击操作列的可以进行规则校验,输入字段值,单击“校验”,提示校验成功。
        图7 校验
    • 开启日志过滤才需要设置,添加黑名单规则。

      您可以添加过滤规则筛选出有价值的日志数据,过滤规则为正则表达式,应用到指定Key的Value。所创建的过滤规则为丢弃规则,即匹配上正则表达式的日志会被丢弃。

      1. 单击“添加”,填写Key值和过滤规则(正则表达式)。Key值为日志字段名称,多条过滤规则之间关系是“或”逻辑。例如不采集日志源文件中包含test的日志,可配置采集规则为.*test.*
      2. 单击操作列的可以进行规则校验,输入字段值,单击“校验”,提示校验成功。
  3. 上传原始日志。

    打开上传原始日志开关后,原始日志将作为content字段的值上传到日志服务。

  4. 上传解析失败日志。

    打开上传解析失败日志开关后,原始日志将作为_content_parse_fail_字段的值上传到日志服务。

  5. 自定义日志时间

    开启后可指定某一字段作为日志时间,或关闭此项使用日志被采集时间作为日志时间。

  6. json解析层数。增加json解析层数配置,取值范围为1~4,只能整数,默认值为1。

    将json格式日志的字段展开,例如原始日志为{"key1":{"key2":"value"}},解析1层日志为:{"key1":{"key2":"value"}},解析2层日志为:{"key1.key2":"value"}。

support.huaweicloud.com/usermanual-lts/lts_07_0072.html