检测到您已登录华为云国际站账号，为了您更好的体验，建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
检测到您已登录华为云国际站账号，为了您更好的体验，建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
使用DSL加工函数清洗LTS日志数据 您可以通过日志加工函数清洗您所采集的海量日志数据，实现数据格式标准化。本文介绍调用函数清洗数据的常见场景和相关操作。 DSL加工的功能在邀测中，支持华北-北京四、华东-上海一、华南-广州局点，仅针对用户内测使用，后续将全网开放，敬请期待！ 场景一：过滤LTS日志
使用DSL加工函数处理日期时间 处理日期时间，将方便您对日志后续查询与可视化展示。本文档主要介绍使用函数进行日期时间数据类型转换和日期时间偏移。 概念解释 数据类型转换和转换函数 日期时间对象和Unix时间戳的相互转换 日期时间字符串和Unix时间戳的相互转换 日期时间对象和日期时间字符串的相互转换
来采集日志并上报，不必再安装采集ICAgent。 目前此功能仅支持华北-北京四、华南-广州、华东-上海一、华东-上海二、亚太-新加坡，其他局点需要提交工单申请使用。 前提条件 使用云日志SDK前，您需要注册用户账号，并开通云日志服务。 确认云日志服务的区域，请用户根据所在区域，获取regionid。 获取华为账号的AK/SK。
finish.时，则表示配置文件中所有服务器的卸载操作已完成。 卸载完成后，在云日志服务左侧导航栏中选择“主机管理 > 主机”，查看该服务器的ICAgent状态。 查看ICAgent状态 左侧导航栏选择“主机管理 > 主机”，查看目标主机的ICAgent状态。详细请参见表1。 表1
请确保已安装ICAgent的服务器可以使用root用户执行SSH、SCP命令，来与待安装ICAgent的服务器进行远端通信。 当显示“ICAgent install success”时，表示安装成功，ICAgent已安装在了“/opt/oss/servicemgr/”目录。安装成功后，在云日志服务左侧导航栏中选择“主机管理
使用消费组管理消费数据（邀测） 创建消费组 使用Java SDK管理消费组 Flink消费 LTS-Flink-Connector参数说明 父主题： 日志消费与加工
e字段才会使用此处设置的值。 allow_fragments Boolean 否 是否解析URL中的fragment部分。 true（默认值）：解析URL中的fragment部分，返回结果中的fragment字段为具体值。 false：不解析URL中的fragment部分，返回结果中的fragment字段为空字符串。
30天，您在创建存放该日志的日志组时，可以对日志存储周期进行设置（1-365天）。详情请参考管理日志组。 登录云日志服务控制台。 在左侧导航栏中，选择“接入 > 接入中心”，单击“云审计 CTS”进行CTS接入配置。 选择日志流。 单击“所属日志组”后的目标框，在下拉列表中选择具
支持弹性负载均衡ELB日志接入LTS。 前提条件 已创建并使用华为云ELB实例。 使用限制 当前ELB日志仅支持七层独享型负载均衡和七层共享型负载均衡，不支持四层共享型负载均衡。 设置ELB接入 云日志服务接入方式为负载均衡 ELB时，按照如下操作完成接入配置。 登录云日志服务控制台。 在左侧导航栏中，选择“接入 >
已采集APIG日志，详情请参见API网关APIG接入LTS。 日志配置结构化，详情请参见设置云端结构化解析日志。 查看APIG访问中心 登录云日志服务控制台，在左侧导航栏中选择“仪表盘”。 在仪表盘模板下方，选择“APIG仪表盘模板 > APIG访问中心”，查看图表详情。 过滤请求域名，所关联的查询分析语句如下所示：
录。安装成功后，在云日志服务左侧导航栏中选择“主机管理 > 主机”，查看该服务器中ICAgent的状态。 如果安装失败，请卸载ICAgent后重新安装，如果还未安装成功，请联系技术支持。 首次安装（Windows环境） 在云日志服务管理控制台，左侧导航栏选择“主机管理 > 主机”，进入“主机”页面。
设备接入IoTDA接入LTS 支持设备接入IoTDA日志接入LTS。 具体接入方法请参见查看运行日志。 父主题： 使用云服务接入LTS
操作方法复杂。 若有以下场景，可以选择使用自定义标识主机组： VPC等自定义网络环境中，可能出现不同服务器IP地址冲突的问题，导致日志服务无法管理ICAgent。使用自定义标识可以避免此类情况的发生。 多台服务器通过同一个自定义标识实现主机组弹性伸缩。您只需为新增的服务器配置相
API网关APIG接入LTS 支持API网关APIG日志接入LTS。 前提条件 已创建并使用华为云APIG实例。 设置APIG接入LTS 云日志服务接入方式为API网关 APIG时，按照如下操作完成接入配置。 登录云日志服务控制台。 在左侧导航栏中，选择“接入 > 接入中心”，单击“API网关 APIG”进行APIG接入配置。
体系，实现微服务应用的快速开发和高可用运维。 CSE仪表盘模板支持查看CES层级访问中心、查看CSE层级监控中心和查看CSE层级秒级监控。 前提条件 已采集CSE日志。 日志配置结构化，详情请参见设置云端结构化解析日志。 查看CES层级访问中心 登录云日志服务控制台，在左侧导航栏中选择“仪表盘
场景二：使用e_set函数为日志空缺字段赋值 您可以使用e_set函数为日志空缺字段赋值。 场景1：原字段不存在或者为空时，为字段赋值。 e_set("result", "......value......", mode="fill") 示例如下所示： 原始日志 { "name":""
支持虚拟私有云VPC日志接入LTS。 前提条件 购买并使用华为云VPC实例。 使用限制 目前支持的弹性云服务器，请参见VPC流日志简介。 设置VPC接入 云日志服务接入方式为虚拟私有云 VPC时，按照如下操作完成接入配置。 登录云日志服务控制台。 在左侧导航栏中，选择“接入 > 接入中心”，单击“虚拟私有云
京四、华东-上海一、华南-广州局点的内测用户使用，其他局点暂不支持。 前提条件 VPC流日志已接入LTS，详细请参见虚拟私有云VPC接入LTS。 已在LTS控制台创建日志组和日志流，用于保存数据加工后的VPC流日志公网流量日志。 使用场景 例如，VPC流日志已接入LTS，采集到云日志服务中的日志示例如下：
已采集CDN日志，详情请参见内容分发网络CDN接入LTS。 日志配置结构化，详情请参见设置云端结构化解析日志。 查看CDN错误分析 登录云日志服务控制台，在左侧导航栏中选择“仪表盘”。 在仪表盘模板下方，选择“CDN仪表盘模板 > CDN错误分析”，查看图表详情。 错误域名访问Top5图表所关联的查询分析语句如下所示：
登录云日志服务控制台。 在左侧导航栏中，选择“日志管理”，进入日志管理页面。 在日志管理页面中，选择目标日志组和日志流，进入日志流详情页面。 选择“日志分析”。 请参考SQL分析语法输入查询和分析语句，设置查询和分析的时间范围，单击“查询”。 单击图标，使用漏斗图展示查询数据。在通用配置下方，参考表1配置参数。
长按/截图保存，微信识别二维码
或者关注公众号“华为云”
