检测到您已登录华为云国际站账号，为了您更好的体验，建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
检测到您已登录华为云国际站账号，为了您更好的体验，建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
使用DSL加工函数清洗LTS日志数据 您可以通过日志加工函数清洗您所采集的海量日志数据，实现数据格式标准化。本文介绍调用函数清洗数据的常见场景和相关操作。 DSL加工的功能在邀测中，支持华北-北京四、华东-上海一、华南-广州局点，仅针对用户内测使用，后续将全网开放，敬请期待！ 场景一：过滤LTS日志
天，否则上报日志会被LTS删除。 contents 是 Array of String 日志内容。 labels 是 Object 用户自定义label。 说明： 请不要将字段名称设置为内置保留字段，否则可能会造成字段名称重复、查询不精确等问题。 tenant_project_id
atus。 对不同的topic保存不同的信息。 overall_type：保留server、client数量、overall_status颜色和service信息。 client_status：保留host地址、status状态和service信息。 server_status：
描述 contents 是 Array of LogContents 包含上报时间戳的日志内容列表。 labels 是 Object 用户自定义label。 说明： 请不要将字段名称设置为内置保留字段，否则可能会造成字段名称重复、查询不精确等问题。 tenant_project_id
浏览器端上报日志，打开匿名写入则表示该日志流打开匿名写入权限，不会经过有效鉴权，可能产生脏数据。关于SDK使用请参考SDK接入。 备注 自定义填写备注信息，字符长度0-1024个字符。 单击“确定”，完成日志流的创建。在日志流列表中，可以查看日志流名称、操作等信息。 支持查看日志流计费状态，日志计费请参考价格计算器。
云审计服务（Cloud Trace Service，简称CTS） 通过OBS服务，您可以将需要长期存储的日志转储至OBS桶中，确保日志不丢失，实现数据持久化。 对象存储服务（Object Storage Service，简称OBS） 通过DIS服务，您可以将需要长期存储的日志转储至D
统计周期 条件表达式查询的频率可以设置为： 每小时：表示整点小时查询。 每天：需要指定几点整查询。 每周：需要指定周几的几点整查询。 固定间隔：自定义间隔周期，需要指定1-60分钟/1-24小时。例如：当前时间为9:00，固定间隔设置为5分钟，则第一次查询时间为9:00，第二次查询时间为9:05，第三次查询时间为9:10
true prefix_name 否 String 转储至OBS桶中的日志文件前缀。 dir_prefix_name 否 String 自定义文件夹路径。 period 是 Integer 转储周期的长度 period_unit 是 String 转储周期的单位。> period
若OBS转储日志桶则不需要此参数。 最小长度：36 最大长度：36 obs_dir_pre_fix_name String OBS转储自定义转储路径。当创建OBS转储时，根据需要选填此参数。 正则约束： ^(/)?([a-zA-Z0-9.-]+)(/[a-zA-Z0-9.-]+)*(/)
日志详细（全部日志使用“ALL_FILES”）。 container_name 否 String 容器名称 deployments_prefix 否 String 可选择的自定义日志流前缀 表5 AomMappingfilesInfo 参数 是否必选 参数类型 描述 file_name 是 String 路径名,匹配规则：^/[A-Za-z0-9
场景1：不带时区信息的日期时间字符串转换成指定时区的日期时间对象。 对于不带时区信息的日期时间字符串2019-06-02 18:41:26，可以通过Unix时间戳，实现不同时区下的日期时间的相互转换。将洛杉矶时区的日期时间转换为上海时区的日期时间。 原始日志：已知time字段的值的时间是洛杉矶时间 {
对status字段名设置了索引（long类型），字段值为400，则字段名status不会被计入在索引流量中，字段值400的索引流量统一为8字节。 说明： 字段索引的自定义分词符和特殊分词符仅支持白名单用户提交工单申请使用。详细操作请参考提交工单。 示例： 例如：原始日志量为10GB，写入到日志服务并开启全文索引，则索引流量以10GB
如果跳板机ECS掉电重启，请重新执行netstat -lnp | grep ssh命令。 在“安装ICAgent”页面，填写DC和跳板机连接IP。 DC：自定义主机节点所属数据中心名称，便于分类查看主机。由数字、大小写字母、中划线、下划线组成，并且最多不超过64个字符。 跳板机连接IP：如果跳板机
支持使用表格、柱状图、折线图等图表类型展示不同场景数据，详细请参考表1。 表1 图表类型 图表类型 使用场景 表格 表格是最常见的数据展示类型，通过对数据结构化的整理，实现数据的对比与统计。大多数场景均适用。 柱状图 柱状图描述的是分类数据，直观表现每一个分类项的大小对比关系。统计近一天各错误码类型出现的次数等分类统计场景适用。
的区别请参考表2。 短语搜索：在关键词搜索语法的基础上实现，短语搜索能够区分关键词的顺序，用于精准匹配目标短语，搜索结果更加精确。短语搜索适用于英文短语、中文短语的搜索，不支持模糊搜索。 关键词搜索：关键词搜索是基于分词实现，通过分词符先将搜索内容拆分为多个关键词，然后匹配日志。
若OBS转储日志桶则不需要此参数。 最小长度：36 最大长度：36 obs_dir_pre_fix_name String OBS转储自定义转储路径。当创建OBS转储时，根据需要选填此参数。 正则约束： ^(/)?([a-zA-Z0-9.-]+)(/[a-zA-Z0-9.-]+)*(/)
e_set("ip",long2ip(v("data"))) 加工结果 data: 1959903232 ip: 116.209.192.0 转换失败后自定义的错误处理。 测试数据 { "data": "4294967296" } 加工规则 e_set("ip",long2ip(v("data")
是 Boolean 是否大小写敏感 includeChinese 是 Boolean 是否包含中文 tokenizer 是 String 自定义分词符 ascii 否 Array of strings 特殊分词符 表5 LTSFieldsInfo 参数 是否必选 参数类型 描述 fieldType
转储日志加密桶则必须填写该参数，若OBS转储日志桶则不需要此参数 obs_dir_pre_fix_name 否 String OBS转储自定义转储路径。当创建OBS转储时，根据需要选填此参数。 obs_prefix_name 否 String OBS转储日志文件前缀。当创建OBS转储时，根据需要选填此参数。
转储日志加密桶则必须填写该参数，若OBS转储日志桶则不需要此参数 obs_dir_pre_fix_name 否 String OBS转储自定义转储路径。当创建OBS转储时，根据需要选填此参数。 obs_prefix_name 否 String OBS转储日志文件前缀。当创建OBS转储时，根据需要选填此参数。
长按/截图保存，微信识别二维码
或者关注公众号“华为云”
