检测到您已登录华为云国际站账号，为了您更好的体验，建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
检测到您已登录华为云国际站账号，为了您更好的体验，建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
过程中，您需要用到账号、用户和密码等信息。 区域（Region） 从地理位置和网络时延维度划分，同一个Region内共享弹性计算、块存储、对象存储、VPC网络、弹性公网IP、镜像等公共服务。Region分为通用Region和专属Region，通用Region指面向公共租户提供通用
正则提取 e_regex 根据正则表达式提取字段的值并赋值给其他字段。支持和其他函数组合使用。 JSON提取 e_json 对特定字段中的JSON对象进行JSON操作，包括JSON展开、JMES提取或者JMES提取后再展开。支持和其他函数组合使用。 分隔符提取 e_csv、e_psv、e_tsv
日志转储限制 本文介绍云日志服务转储的限制。 表1 日志转储限制 类别 限制项 说明 备注 转储OBS 单个日志流转储任务数量 1 个日志流只能配置一个转储OBS任务。 不涉及。 转储周期 2分钟、5分钟、30分钟、1小时、3小时、6小时、12小时。 不涉及。 每次转储数据大小 0MB-2GB。
DCS仪表盘模板 分布式缓存服务（Distributed Cache Service，简称DCS）是一款内存数据库服务，兼容了Redis内存数据库引擎，满足用户高并发及数据快速访问的业务诉求。云日志服务提供对各种云资源操作记录的收集、存储和查询功能，可用于支撑安全分析、合规审计、资源跟踪和问题定位等常见应用场景。
日志告警限制 本文介绍云日志服务告警的限制。 表1 告警限制说明 类别 限制项 说明 备注 告警监控 告警规则数量 您在1个华为账号下最多可创建200个告警。 如您有更大的使用需求，请提交工单申请。 搜索和分析条件组合个数 关键词搜索为1个，SQL分析个数为1-3个。 不涉及。 查询时间范围
encoding String 否 原始未压缩数据的编码格式，默认utf-8，其他编码格式请参见标准编码格式。 返回结果 返回解压后的对象。 函数示例 示例1：对日志字段进行Base64解码。 测试数据 { "content": "H4sIAA8JXl4C/xXK0QmA
evicemapper。 解决虚机日志量大（转储快）ICAgent内存暴涨导致重启问题。 2023-11-06 5.12.156 解决从OBS拉取安装包问题，将http协议改成https。 2023-11-01 5.12.154 支持结构化功能。 2023-10-31 5.12.153
使用DSL加工函数过滤VPC流日志公网流量 虚拟私有云VPC提供流日志功能，可以帮您采集指定VPC内网络实例的流量信息，包括入方向和出方向的流量。创建流日志后，您可以在配置的日志组中查看流日志记录。更多VPC流信息请参考VPC流日志概述。 在虚拟私有云VPC控制台上创建VPC流日
"srcaddr" as "源IP", "dstaddr" as "目的IP", "srcport" as "源端口", "dstport" as "目的端口", "protocol" as "协议类型", "direct" as "流量方向", "packets" as "包数", "bytes"
通3年存储时长。 降低存储成本： 使用LTS在23年1130公测的冷存储特性，冷存储的日志存储单价比OBS仅贵25%，但是可以支持搜索，在易用性和成本上是最佳选择。 转储至OBS，优点是成本低，缺点是不支持搜索历史日志的内容，使用不便利。 大数据组件日志采集场景 场景描述：有些用
目标字段名，也可以通过字符串表达式获得该字段名。 value 任意 是 新的字段值。非字符串都转化成字符串放入日志中，其中元组、列表、字典会转换成JSON对象的字符串。 说明 如果传递的值是None，则不会进行更新操作。 mode String 否 字段的覆盖模式。默认为overwrite。 返回结果
用于引用多个值的配对类字符的引用符。 lstrip String 否 是否将值左边的空格去掉，默认为true。 jmes String 否 将字段值转化为JSON对象，并使用JMES提取特定值，再进行分裂操作。 output String 否 设置一个新的字段名，默认覆盖旧字段名。 返回结果 返回日志列表，列表中字段的值都是源列表中的值。
txt”，单击“开始下载日志”，可将日志导出至本地。 前往创建转储（白名单功能）：通过OBS转储任务下载日志文件，单次下载支持最大2,000万条日志。单击“前往创建转储”，跳转至配置转储页面，详细请参考日志转储至OBS。 鼠标悬浮在按钮上，单击“日志下载历史”，在日志下载历史页面，支持查看、下载、删除日志下载记录。
方法：初始化拦截器操作，读取配置信息、建立连接等。 intercept(Event event) 方法：用于拦截单个事件，并对事件进行处理。接收一个事件对象作为输入，并返回一个修改后的事件对象。 intercept(List<Event> list) 方法：事件批处理，拦截事件列表，并对事件列表进行处理。 close()
方法：初始化拦截器操作，读取配置信息、建立连接等。 intercept(Event event) 方法：用于拦截单个事件，并对事件进行处理。接收一个事件对象作为输入，并返回一个修改后的事件对象。 intercept(List<Event> list) 方法：事件批处理，拦截事件列表，并对事件列表进行处理。 close()
txt”，单击“开始下载日志”，可将日志导出至本地。 前往创建转储（白名单功能）：通过OBS转储任务下载日志文件，单次下载支持最大2,000万条日志。单击“前往创建转储”，跳转至配置转储页面，详细请参考日志转储至OBS。 鼠标悬浮在按钮上，单击“日志下载历史”，在日志下载历史页面，支持查看、下载、删除日志下载记录。
自定义图表名称，用于区分日志流下不同的图表。 仅支持中英文、数字、中划线、下划线、空格、括号、小数点，不能以小数点、空格开头或结尾。长度为1-64个字符。 可视化对象 默认语句“SELECT * ”，表示查询该日志流内的结构化数据，其中*为结构化字段。 如需自行编辑SQL语句，请参考SQL分析语法介绍。
能出现的异常问题。 配置数据源。 选择源日志组，若没有，则单击创建日志组。 超出存储时间的日志将会被自动删除，您可以按需将日志数据转储至OBS桶中长期存储。 如果您的日志尚未接入LTS，请参考日志接入，创建日志接入规则，并配置结构化解析规则。 选择日志流，若没有，则单击创建日志流。
关闭日志流的“日志存储时间”：日志的存储时间使用日志组设置的日志存储时间。 超出存储时间的日志将会被自动删除，您可以按需将日志数据转储至OBS桶中进行长期存储。 目前仅支持白名单用户提交工单申请开通日志存储时间为1095天，但是存量Region需要根据底层资源评估是否支持1095天。
创建Flink Jar作业时需要上传lts-flink-connector-1.0.3.1.jar的程序包。在选择程序包之前需要将对应的Jar包上传至OBS桶中，并在“数据管理>程序包管理”中创建程序包，具体操作请参考创建程序包。 FlinkLtsLogConsumer FlinkLtsLog
长按/截图保存，微信识别二维码
或者关注公众号“华为云”
