检测到您已登录华为云国际站账号，为了您更好的体验，建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
检测到您已登录华为云国际站账号，为了您更好的体验，建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
Flume是一个高可用的，高可靠的，分布式的海量日志采集、聚合和传输的系统，Flume支持在日志系统中定制各类数据发送方，用于收集数据；同时，Flume提供对数据进行简单处理，并写到各种数据接受方的能力。 用户使用Flume系统采集日志，并且通过LTS侧提供的KAFKA协议方式上报日志。以下是部分常用数据采集场景示例：
转储流量会统计非压缩的转储数据量，以转储DMS流量统计为例： 若用户转储原始日志：LTS会统计转储的原始日志的大小（非压缩），那么统计的转储流量是length("192.168.0.1 200 190 /check")=26字节 若用户转储结构化解析后的日志：LTS会统计转储日志的KEY和V
prefix_name 否 String 转储至OBS桶中的日志文件前缀。 最小长度：0 最大长度：64 dir_prefix_name 否 String 自定义文件夹路径。 最小长度：0 最大长度：64 period 是 Integer 转储周期的长度 枚举值： 1 2 3 5 6 12 30
单击“自动配置”，云日志服务会根据采集时预览数据中的第一条日志字段、结构化字段、常见内置保留字段（例如hostIP、hostName、pathFile）自动生成内容，您可以根据自己的需要添加或者删除字段。 单击“添加”，在日志字段和表字段的下拉框中，选择您需要转储的字段。 单击操作列下的，删除不需要转储的字段。 - 表分区列映射
flink消费保证最终一致性，即您可以获取到这条日志流的全部内容，但由于时间为服务端时间，所以在获取日志流的过程中，可能导致获取到的日志数量跟LTS页面查询的日志数量不一致。 语法结构 认证用的ak和sk硬编码到代码中或者明文存储都有很大的安全风险，建议在配置文件或者环境变量中密文存放，使用时解密，确保安全。
String 必填 - 华为云账号的项目ID。 accessKey String 必填 - 华为云账号的访问密钥，简称AK。 认证用的华为云账号AK、SK硬编码到代码中或者明文存储都有很大的安全风险，建议密文存放，使用时解密，确保安全。 说明： 认证用的华为云账号AK、SK硬编码到代
string 必填 - 华为云账号的项目ID。 groupId string 必填 - LTS的日志组ID。 streamId string 必填 - LTS的日志流ID。 accessKey string 必填 - 华为云账号的访问密钥，简称AK。注意：认证用的华为云账号AK、SK硬编码
S)请求进行检测，识别并阻断SQL注入、跨站脚本攻击、网页木马上传、命令/代码注入等攻击，所有请求流量经过WAF时，WAF会记录攻击和访问的日志，可实时决策分析、对设备进行运维管理以及业务趋势分析。 通过LTS分析WAF日志 WAF接入LTS后，支持通过LTS分析WAF日志。 父主题：
云日志服务SDK提供了Go语言上报日志的一系列方法，方便用户直接使用编码方式上报日志到云日志服务后台。 传输协议 HTTPS 使用前提 参考注册华为账号并开通华为云中操作，完成注册。 确认云日志服务的区域，请用户根据所在区域，选择RegionName。 获取华为账号的AK/SK。 获取华为云账号的项目ID（project
中间件-ElasticSearch日志 ElasticSearch是一个开源的分布式搜索和分析引擎，被广泛用于构建实时的、可扩展的搜索和分析应用程序。它的主要作用是存储、搜索和分析大量的数据。ElasticSearch的日志是记录其运行过程中各种信息的重要工具，主要有以下两种类型： 主要日志（cluster-name
Syslog是网络上各种设备将日志收集到日志服务器的一种数据协议，它几乎被所有的网络设备支持，并且能够记录多种事件类型的日志消息，支持syslog的设备常见的有路由器、交换机、打印机等，甚至unix-like的服务器也可以支持产生syslog消息，用以记录用户的登录、防火墙事件、apache或者nginx
使用ICAgent收集日志时CPU占用较高怎么处理？ 云日志服务LTS支持采集的日志类型和文件类型有哪些？ 如何在LTS页面关闭CCE标准输出日志采集到AOM？ 使用ICAgent采集日志时，推荐的日志轮转方案是什么？ 是否支持Log4j插件上报日志到LTS？ LTS配置日志接入后多久有日志？
获取需要上报到LTS的日志组ID和日志流ID。 使用说明 当用户修改权限后，权限信息在一天后生效。通过SDK上报日志到LTS的时间相距当前时间不超过2天，否则上报日志会被LTS删除。 注意事项 认证用的ak和sk硬编码到代码中或者明文存储都有很大的安全风险，建议在配置文件或者环境变量中密文存放，使用时解密，确保安全。
数据和半结构化数据的搜索语句、“|”和针对结构化数据的查询的分析语句。语法示例结构：* and msg:"hello world" | SELECT avg(value) 管道符搜索方式的功能在邀测中，暂不支持申请开通。 目前支持两种查询方式（以kibana上的查询语句为例）： 情景1：仅包含sql查询
构建字典与表格进行数据富化 字典和表格是对数据进行富化时主要使用的两种数据结构，本文档主要介绍这两种数据结构的常见构建方式，并对比不同构建方式的优缺点。 字典构建 不同字典构建方式对比参考如下： 表1 不同字典构建方式对比 构建方式 优点 缺点 直接构建 直观、简单、方便。 如果
LTS日志转储状态显示异常是什么原因？ 在云日志服务LTS控制台的“日志转储”页面，日志转储任务的状态显示异常，有可能是如下原因引起： 可能原因：OBS桶策略异常。 解决方法：请您在对象存储服务中设置访问控制策略。详细请参考配置桶策略。 可能原因：Kafka集群被删除。 解决方法
19:00:00的日志数据。 自定义：表示查询指定时间范围的日志数据。 从剪切板中粘贴：单击“从剪切板中粘贴”，可直接自动将您剪切的日志内容复制到示例日志框中。 字段提取。包括自动生成和手动输入两种方式，可将选择的日志提取为以一个示例字段对应一个字段名称的格式的日志解析结果。 自
19:00:00的日志数据。 自定义：表示查询指定时间范围的日志数据。 从剪切板中粘贴：单击“从剪切板中粘贴”，可直接自动将您剪切的日志内容复制到示例日志框中。 字段提取。包括自动生成和手动输入两种方式，可将选择的日志提取为以一个示例字段对应一个字段名称的格式的日志解析结果。 自
示例4：查询指定日志组下的所有日志流 场景描述 本章以查询指定日志组下的所有日志流信息为例。 涉及其它云服务接口 无。 查询日志流 接口相关信息 URI格式：GET /v2/{project_id}/groups/{log_group_id}/streams 请求示例 GET h
} else { fmt.Println(err) } } 更多编程语言的SDK代码示例，请参见API Explorer的代码示例页签，可生成自动对应的SDK代码示例。 状态码 状态码 描述 200 查询资源成功 400 BadRequest 非法请求
长按/截图保存，微信识别二维码
或者关注公众号“华为云”
