检测到您已登录华为云国际站账号，为了您更好的体验，建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
检测到您已登录华为云国际站账号，为了您更好的体验，建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
格式，dt_parse等智能转换函数无法自动解析日志，需要使用dt_strptime函数来进行解析指定格式。 父主题： 使用DSL加工函数处理日期时间
关闭日志存储 使用源日志组/日志流所在的账号登录云日志服务LTS控制台。 在日志管理页面，找到源日志组/日志流。 单击源日志流操作列的，在修改日志流页面，关闭日志存储和日志存储时间。 图1 修改日志流 单击“确定”。关闭日志存储后，日志不会存储到LTS，可节约索引流量和存储费用，只
日志转储至DLI后，在DLI表中查不到新增分区怎么处理？ 设置日志转储至DLI后，在DLI表中查不到新增分区，请参考如下方法处理。 方法1：更新表在元数据库中的分区信息 登录DLI控制台。 左侧导航栏选择“作业管理-SQL作业”。 单击对应队列的操作列“编辑”，进入详情页，在编辑框输入命令“MSCK
中间件-Flink日志 Flink是一个大数据处理引擎的处理框架，是针对流进行的处理。它是Apache旗下的一个框架和分布式的处理引擎，用于对无界和有界的数据进行状态的计算。Flink的核心特点包括高吞吐、低延迟（每秒处理数百万个事件，毫秒级延迟），以及结果的准确性（Flink提
志存储时间。 智能冷存储 开启日志存储时间后，根据业务需要设置智能冷存储功能。详细请参考智能冷存储。 说明： 开启智能冷存储需要日志存储时间大于7天。 标准存储层数据保存时间 开启智能冷存储后，需要设置标准存储层数据的保存时间。 标准存储数据至少需保存7天才能转换为智能冷存储层数
轮询和inotify感知目标日志文件的变化。 ICAgent侧发现文件变更后，读取文件的内容，分块发送到处理模块，进行单行、多行、结构化、拆分、添加标签等日志处理动作，再将处理好的任务提交到发送任务池后，上报到LTS。 ICAgent安装说明 如果需要采集主机指标、容器指标、节点
日期时间对象和Unix时间戳的相互转换 处理函数 推荐dt_parse函数将Unix时间戳转换为日期时间字符串。 e_set函数中的tz参数设置会将不带时区的日期时间对象处理为带时区的，或将原时区的转换为目标时区。 Unix时间戳转换成带时区的时间字符串对象。 原始日志 {
理。 归档日志（用于等保合规）：典型保存180天以上，用于安全合规审计，该日志一般转储存放到对象存储中。使用对象存储的迁移工具，将第三方云厂商保存在对象存储中的文件迁移到华为云对象存储服务OBS即可。详细操作请参考迁移第三方云厂商数据至OBS。 父主题： 产品咨询问题
Service，简称LTS）。LTS用于收集来自主机和云服务的日志数据，通过海量日志数据的分析与处理，可以将云服务和应用程序的可用性和性能最大化，为您提供一个实时、高效、安全的日志处理能力，帮助您快速高效地进行实时决策分析、设备运维管理、用户业务趋势分析等。 您可以使用本文档提供
Elasticsearch是一个基于Lucene的开源、分布式、RESTful搜索和分析引擎。 Logstash是一个开源的、服务器端的数据处理管道，能够同时从多个来源实时接收、转换并将数据发送到用户选择的“存储库”。通常用于日志的收集、过滤和转发。 Kibana是一个开源的分析和可视化平台，用于数据的可视化、仪表
日期时间字符串和Unix时间戳的相互转换 处理函数 dt_str智能转换函数，可以将Unix时间戳、日期时间对象和日期时间字符串转化为指定格式的日期时间字符串。 dt_strftimestamp函数只支持将Unix时间戳转化为日期时间字符串。 dt_parsetimestamp智
日期时间对象和日期时间字符串的相互转换 处理函数 dt_parse智能转换函数可以将日期时间字符串或Unix时间戳转换为日期时间对象。 dt_astimezone函数返回一个带新时区信息的日期时间对象。 场景1：不带时区信息的日期时间字符串转换成指定时区的日期时间对象。 对于不带
Spark、Apache Flink、openLooKeng（基于Apache Presto）生态，提供一站式的流处理、批处理、交互式分析的Serverless融合处理分析服务。用户不需要管理任何服务器，即开即用。支持标准SQL/Spark SQL/Flink SQL，支持多种接入
日志转储后，LTS会删除转储的日志内容吗？ LTS日志转储状态显示异常是什么原因？ 如何转储云审计服务CTS的日志？ 配置LTS日志转储至OBS后，OBS桶无法查看历史数据？ 日志转储至DLI后，在DLI表中查不到新增分区怎么处理？
云防火墙CFW接入LTS 支持云防火墙CFW日志接入LTS。LTS对于采集的日志数据，通过海量日志数据的分析与处理，可以为您提供一个实时、高效、安全的日志处理能力。 具体接入方法请参见配置日志。 父主题： 使用云服务接入LTS
使用LTS SDK相关问题 本文介绍使用LTS SDK的常见问题和相关报错的处理方法。 端侧SDK日志接入LTS时需要注意什么？ 答：请用户在使用端侧SDK日志接入LTS时，建议提前做好一键关闭日志上报、逐步提升上报流量等措施，做到及时止损，如果您的移动端日志流量非常大，请提前知会LTS技术支持为您提前预留资源。
在AOM关闭超额继续采集日志开关，会影响LTS收集日志吗？ 使用ICAgent收集日志时CPU占用较高怎么处理？ 云日志服务LTS支持采集的日志类型和文件类型有哪些？ 如何在LTS页面关闭CCE标准输出日志采集到AOM？ 使用ICAgent采集日志时，推荐的日志轮转方案是什么？
Label白名单时的处理逻辑，AND表示同时满足才会生效，OR表示有一项满足就会生效 excludeLabelsLogical 否 String 容器 Label黑名单生效逻辑，可选为AND，OR，不配置时默认为OR；当存在多个容器 Label黑名单时的处理逻辑，AND表示同时满足才会生效，OR表示有一项满足就会生效
LTS SDK接入错误码 当您使用LTS SDK报错时，请参见表1进行处理。 表1 错误码 状态码 错误码 错误信息 描述 处理措施 参数类错误（LTS.00XX） LTS.0001 %@ is null. 参数%@为空。 请设置非空的参数后重试。 LTS.0002 %@ is invalid
通过加工规则对读取到的每一条数据进行加工处理。 将加工后的数据写入目标日志流。数据加工完成后，您可以在目标日志流中查看加工后的数据。 功能特性 云日志服务提供数据加工功能，用于数据的规整、富化、脱敏和过滤。 数据规整：针对混乱格式的日志进行字段提取、格式转换，获取结构化数据以支持后续的流处理、数据仓库计算。
长按/截图保存，微信识别二维码
或者关注公众号“华为云”
