检测到您已登录华为云国际站账号，为了您更好的体验，建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
检测到您已登录华为云国际站账号，为了您更好的体验，建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
在对VPC流日志查询和分析过程中，为便于分析公网流量，您需要对原始日志做以下处理： 如果srcaddr和dstaddr字段不存在，则丢弃该日志。 如果是私网之间互通的流量，则丢弃该日志。 基于以上需求，您可以通过DSL日志加工，对采集到的VPC流日志进行日志加工，便于问题分析。 操作步骤 V
pack_json=None) 参数说明 参数名称 参数类型 是否必填 说明 key 任意 是 源字段名。如果字段不存在，则不进行任何操作。特殊字段名的设置请参见事件类型。 正则表达式 String 是 提取字段的正则表达式。 支持捕获组和非捕获组正则表达式。 非捕获有时需要使用分组，且使用前缀
保存LTS快速查询日志条件 当您需要重复使用某一关键字搜索日志时，可以将其设置为快速查询语句。 创建快速查询 在云日志服务控制台，单击“日志管理”。 在日志组列表中，单击日志组名称前对应的按钮。 在日志流列表中，单击日志流名称，进入日志详情页面。 在“统计图表”页签，单击，输入“
日志文件编码 日志文件编码支持UTF-8、GBK（暂不支持Windows场景）。 UTF-8编码是一种变长编码方式，用于表示Unicode字符集。GBK全称《汉字内码扩展规范》，中文计算机编码的一种，是ASCII码和GB2312编码的扩展。 采集策略 采集策略支持增量或全量。 增量采集：I
SQL同比和环比函数 本文介绍同比和环比函数的基础语法和示例。 compare函数 compare函数用于对比当前时间周期内的计算结果与n秒之前时间周期内的计算结果。 语法格式 对比当前时间周期内的计算结果与n秒之前时间周期内的计算结果。 compare(x,n) 对比当前时间周
说明 value 字符串、Unix时间戳或日期时间对象 是 值或时间表达式。 tz String 否 表示时区，默认为None。 返回结果 返回转换后的Unix时间戳。 函数示例 示例1：把time字段的值转换成时间戳，时区是北京。 测试数据 { "time": "2019-06-03
数据类型转换和转换函数 日期时间字符串、日期时间对象和Unix时间戳的相互转换方式和对应转换函数如下图所示。 上图所示的转换场景和对应的转换函数具体描述如下表所示。 转换场景 转换函数 日期时间对象和Unix时间戳的相互转换 日期时间对象转为Unix时间戳。 dt_parseti
或云端结构化解析。 ICAgent结构化解析是在采集侧做结构化，支持插件组合解析，单个日志流的多个采集配置支持不同结构化解析规则，推荐使用ICAgent结构化解析的方式，更多内容请参考ICAgent结构化解析规则说明。 云端结构化解析是通过不同的日志提取方式将日志流中的日志进行结
日志转储至DLI后，在DLI表中查不到新增分区怎么处理？ 设置日志转储至DLI后，在DLI表中查不到新增分区，请参考如下方法处理。 方法1：更新表在元数据库中的分区信息 登录DLI控制台。 左侧导航栏选择“作业管理-SQL作业”。 单击对应队列的操作列“编辑”，进入详情页，在编辑框输入命令“MSCK
设置云端结构化模板 云日志服务（LTS）目前支持的结构化模板有两种，分别为系统模板和自定义模板。 系统模板 支持多种系统模板，不支持修改系统模板的字段类型和删除字段，详情请参考表1。 在云端结构化解析页面中，日志结构化方式选择“结构化模板”。 在“选择模板”下，选择“系统模板”，
LTS数字图 数字图通常用来表示单一数据点或关键性指标，能够更好地展示单一信息和数据的相对大小，是一种非常清晰的信息展示方式，适用于需要重点突出关键信息和数据的场合。通过数字图可以快速地呈现信息和数据，使得用户能够快速、直观地理解数据的趋势和关键指标。 查看数字图 登录云日志服务控制台。
日志文件编码 日志文件编码支持UTF-8、GBK（暂不支持Windows场景）。 UTF-8编码是一种变长编码方式，用于表示Unicode字符集。GBK全称《汉字内码扩展规范》，中文计算机编码的一种，是ASCII码和GB2312编码的扩展。 采集策略 采集策略支持增量或全量。 增量采集：I
字符串函数 概述 多字符串和排序、反转、替换 常见操作 查找判断、切分和格式化 字符集判断 父主题： 操作符函数
包括饼图、环图和南丁格尔玫瑰图。 饼图 饼图是一种用于展示各部分组成在整体中所占百分比的图形。它通过将一个圆形划分为不同的扇区，每个扇区的面积（或弧长和圆心角）大小对应所表示的数据的比例，从而直观地展示出各部分与整体之间的关系。 环图 环图本质上是将饼图中心挖空，相比于饼图来说有如下优点：
LTS地图 以地图作为背景，通过图形颜色、图像标记的方式展示地理数据信息。云日志服务（LTS）提供的地图，包括中国地图和世界地图。您在查询和分析语句中使用特定函数（中国地图：ip_to_province函数，世界地图：ip_to_country函数）后，云日志服务（LTS）将以地图形式展示分析结果。
构建字典与表格进行数据富化 字典和表格是对数据进行富化时主要使用的两种数据结构，本文档主要介绍这两种数据结构的常见构建方式，并对比不同构建方式的优缺点。 字典构建 不同字典构建方式对比参考如下： 表1 不同字典构建方式对比 构建方式 优点 缺点 直接构建 直观、简单、方便。 如果
DK写入日志数据时指定的日志时间，该字段可用于日志投递、查询、分析。 日志中原有的时间字段：日志在生成时，用于记录日志事件发生时间的字段，是原始日志的字段。 转换时间字段格式的方式： 将__time转化成时间戳 将__time以指定格式打印 将日志中的时间转换成指定格式 将__time转化成时间戳
LTS漏斗图 漏斗图适用于业务流程比较规范、周期长、环节多的单流程单向分析，通过漏斗各环节业务数据的比较能够直观地发现和说明问题所在的环节，进而做出决策。漏斗图用梯形面积表示某个环节业务量与上一个环节之间的差异。 查看漏斗图 登录云日志服务控制台。 在左侧导航栏中，选择“日志管理”，进入日志管理页面。
"age":23, "name":"twiss", "IdNumber":1 } 加工规则：首先判断content字段值是否为123，如果是，则删除age和name字段，再将IdNumber字段重命名为Id。 e_if(e_search("content==123"),e_com
LTS-Flink-Connector参数说明 云日志服务可以帮助您快捷地完成数据采集、消费、投递以及查询分析，提升运维和运营效率，建立海量日志处理能力。 LTS-Flink-Connector工具支持以下表1。 表1 功能说明 功能 说明 支持类型 源表和结果表 运行模式 仅支持流模式
长按/截图保存，微信识别二维码
或者关注公众号“华为云”
