检测到您已登录华为云国际站账号，为了您更好的体验，建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
检测到您已登录华为云国际站账号，为了您更好的体验，建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
environment variables CLOUD_SDK_AK and CLOUD_SDK_SK in the local environment ak = os.environ["CLOUD_SDK_AK"] sk = os.environ["CLOUD_SDK_SK"]
分布式消息服务 DMS提供日志实时处理管道，您可以通过分布式消息服务API实时消费处理日志。 前提条件 日志已接入LTS。 已购买DMS。DMS存储独立收费，收费详情请参见：华为云定价 在注册DMS Kafka实例前，需在安全组中，开放入方向规则198.19.128.0/17和9011
日志会存储到冷存储中，到第12天时，第2天的日志会存储到冷存储中，以此类推。 图1 冷存储 问题：冷存储的日志是否能重新变成标准存储日志？ 答：不能，冷存储的日志不支持重新转为标准存储。 问题：标准存储的日志转换成冷存储的生效周期有多久？ 答：1个小时内。 问题：日志存储一段时间
目标表格。 field String、String List或Tuple List 是 日志中映射到表格的源字段。如果日志中不存在对应字段，则不进行任何操作。 output_fields String、String List或Tuple List 是 映射后的字段。例如["province"
expand_array Boolean 否 是否将数组展开。默认为true表示展开数组。 fmt_array String 否 数组展开的格式化方式，格式为{parent_rlist[0]}_{index}。也可以使用最多五个占位符自定义格式化字符串：parent_list，current，sep，prefix，suffix。
在LTS控制台如何手动删除日志数据？ 不可以手动删除日志数据。LTS后台会根据设置的日志存储时间自动清理过期的日志数据。 设置日志存储时间请参考管理日志流。 父主题： 日志搜索与分析
管理的基本单位，可以创建日志流以及设置日志存储时间。 日志流 日志流（LogStream）是日志读写的基本单位，日志组中可以创建日志流，方便对日志进一步分类管理。 日志读写以日志流为单位，您可以在写入时指定日志流，将不同类型的日志分类存储，ICAgent采集日志后，将多条日志数据
存储在LTS的日志是否可以用于安全合规审计？ 存储在云日志服务LTS的日志可以用于安全合规审计。日志上报到LTS后，LTS不支持修改日志，防止日志被篡改。因此，用户可以将日志长期存储在LTS，随时查询用于安全合规审计场景。 如果使用日志组的日志存储时间，请参考管理日志组修改日志存
example, set environment variables CLOUD_SDK_AK and CLOUD_SDK_SK in the local environment /* 认证用的ak和sk硬编码到代码中或者明文存储都有很大的安全风险, 建议在配置文件或者环境变量中密文存放,
/check"} 读写流量、索引流量、存储流量变化说明： ICAgent结构化解析功能商用以后恢复对云端结构化解析所有字段的存储、索引及读写流量的收费。 ICAgent结构化解析商用前：LTS服务端支持原始日志content及其结构化字段的存储及搜索等能力，但是免去了结构化字段，即
n 时间窗口，单位为秒。例如3600（1小时）、86400（1天）、604800（1周）、31622400（1年）。 返回类型 JSON数组。格式为[当前计算结果,n秒前的计算结果,当前计算结果与n秒前计算结果的比值]。 示例说明 计算当前1小时和昨天同时段的访问量比值。 选择
从当前数据加工任务中拉取高级参数配置信息。 支持和其他函数组合使用。 res_obs_file 从OBS中获取特定Bucket下的文件内容，支持定期更新数据。 支持和其他函数组合使用。 res_local 使用res_local函数从当前数据加工任务中拉取高级参数配置信息。支持和其他函数组合使用。 函数格式 res_local(param
存储层数据转为冷存储。 在开启智能冷存储功能后，如果标准存储时间增大，冷存储数据的存储时间仅对最新数据生效，冷存储数据不会重新转为标准存储。 在开启智能冷存储功能后，在可视化日志、仪表盘、定时SQL的查询时间范围查询日志时，不支持查询涉及冷存储的时间段，需将查询时间设置为标准存储的时间范围。
时间窗口，单位为秒。例如3600（1小时）、86400（1天）、604800（1周）、31622400（1年）。 long 是 返回类型 JSON数组。格式为[当前计算结果,n秒前的计算结果,当前计算结果与n秒前计算结果的比值]。 示例说明 计算当前1小时和昨天同时段的访问量比值。 选择
environment variables CLOUD_SDK_AK and CLOUD_SDK_SK in the local environment ak = os.environ["CLOUD_SDK_AK"] sk = os.environ["CLOUD_SDK_SK"]
environment variables CLOUD_SDK_AK and CLOUD_SDK_SK in the local environment ak = os.environ["CLOUD_SDK_AK"] sk = os.environ["CLOUD_SDK_SK"]
本文档主要为您介绍如何使用云日志服务数据加工功能对复杂的JSON数据进行加工。 多子键为数组的复杂JSON数据加工 程序构建的日志会以一种统计性质的JSON格式写入，通常包含一个基础信息以及多个子键为数组的数据形式。例如一个服务器每隔1分钟写入一条日志，包含当前信息状态，以及相关服务器和客户端节点的统计状态信息。
10500 source 触发慢查询的原始查询语句（JSON格式）。 {"query":{"match_all":{}}}\n shards 慢查询涉及的分片信息数组。 - index 分片所在的索引名称。 my_index shard 分片的ID。 0 search_type 查询类型。
量、标准存储量、冷存储量、转储费用，详细请参考计费项。关于500M免费额度的具体说明如下： 日志读写流量：按流量计费，每月免费赠送您500M额度，超过后按需收费。 日志索引流量：按流量计费，每月免费赠送您500M额度，超过后按需收费。 标准存储量：按存储空间计费，标准存储每月免费赠送您500M额度，超过后按需收费。
https://{endpoint}/v3/{project_id}/lts/struct/customtemplate/list /v3/{project_id}/lts/struct/customtemplate/list 响应示例 状态码： 200 请求响应成功。 { "results" : [ {
长按/截图保存，微信识别二维码
或者关注公众号“华为云”
