检测到您已登录华为云国际站账号，为了您更好的体验，建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
检测到您已登录华为云国际站账号，为了您更好的体验，建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
该接口用于注册DMS kafka实例。 在注册DMS kafka实例前，需要在安全组中，开放入方向规则198.19.128.0/17和9011端口。 如果DMS kafka实例的子网配置了ACL，则需要在该子网的网络ACL中，开放入方向规则198.19.128.0/17和9011端口。 调用方法
SQL数学函数 功能描述 数学函数为标量函数中的一种，只支持数值类型的字段，能够实现对数值进行取整、取绝对值、求余等功能，具体请参考表1。 在数学运算中，如果表达式里涉及的操作数皆为整数，那么SQL将会采用整数运算，否则便会切换到浮点运算。您可以将其中一个操作数转换为FLOAT类
tity and Access Management，简称IAM），通过IAM可以进行如下操作： 根据企业的业务组织，在您的华为云账号中，给企业中不同职能部门的员工创建IAM用户，让员工拥有唯一安全凭证，并使用LTS资源。 根据企业用户的职能，设置不同的访问权限，以达到用户之间的权限隔离。
本文介绍如何使用数据加工对包含JSON对象的日志进行解析与更新。 场景一：展开和提取JSON对象 日志中包含JSON对象时，您可以通过e_json函数展开和提取对象。 示例：指定字段名精确提取JSON对象值，例如展开data字段值中的第一层键值对。 原始日志 { "data": {"k1": "v1"
概念解释 LTS DSL语法中的日期时间处理主要涉及三种数据类型：日期时间字符串、日期时间对象和Unix时间戳。 日期时间字符串：日期时间字符串的主要用途是为了便于展示以及提升用户可读性。 LTS DSL语法中的日期时间字符串主要分为两种形式： 带有时区信息的日期时间字符串，如2018-06-02
格式暂不支持。 加工规则 通过原始日志中的account字段和OBS CSV文件中的account字段进行匹配，只有account字段的值完全相同，才能匹配成功。匹配成功后，返回OBS CSV文件中的nickname字段和字段值，与原始日志中的数据拼接，生成新的数据。 e_tab
采集器隐私声明 由于LTS会将运维数据内容展示到LTS控制台，请您在使用过程中，注意您的隐私及敏感信息数据保护，不建议将隐私或敏感数据上传到LTS，必要时请加密保护。 采集器部署 在ECS上手动部署ICAgent过程中，安装命令会使用到您的AK/SK作为输入参数，安装前请您关闭系统的历史
日期时间对象和Unix时间戳的相互转换 处理函数 推荐dt_parse函数将Unix时间戳转换为日期时间字符串。 e_set函数中的tz参数设置会将不带时区的日期时间对象处理为带时区的，或将原时区的转换为目标时区。 Unix时间戳转换成带时区的时间字符串对象。 原始日志 {
使用时间函数将日志时间字段转换为指定格式 在日志搜索分析中往往需要对日志中的时间字段进行处理，例如将日志的时间戳转换成指定格式等，本文介绍时间字段的常用转换示例。 本示例属于白名单功能，支持华北-北京四、华东-上海一、华南-广州、亚太-新加坡、拉美-墨西哥城二区域的白名单用户使用
则会删除第一天的日志），未开启智能冷存储，使用云日志服务（LTS）30天，基于此场景，具体消费情况如下表1所示。 表格中的价格仅为示例，实际计算请以价格计算器中的价格为准。 表1 计费明细表（免费使用场景） 计费项 说明 使用量 月计费 读写流量 每天读写流量10MB/5（压缩倍
例如：日志存储时间是30天，标准存储层数据保存时间是10天，假设第一天开始有日志上报，那么到第11天时，第1天的日志会存储到冷存储中，到第12天时，第2天的日志会存储到冷存储中，以此类推。 图1 冷存储 问题：冷存储的日志是否能重新变成标准存储日志？ 答：不能，冷存储的日志不支持重新转为标准存储。
最值函数对零个或多个字段进行操作，并返回单个值。 在最值函数的使用中请注意以下几点： 如果没有设置字段，则返回空值。字段必须能够转换为常见的数据类型。 如果所有字段都为空值，则返回空值。如果只有部分字段为空值，这些字段会被忽略。 如果字段中既有数字也有字符串，则函数将它们作为字符串进行比较。
Build/JRO03D))||" } 解决方案 在content中的GET /index/htsw/?ad=5|8|6|11| HTTP/1.1，如果使用e_csv解析不出正确的字段，需要先把这一块提取出来，然后在content中把这块内容替换成空。 e_regex("content",
据？ 在云日志服务LTS控制台，配置OBS转储后，OBS桶无法查看历史数据，是因为云日志服务配置的日志转储是将最新产生的日志转储到OBS桶中，不会对历史日志进行转储。 更多信息请参考日志转储至OBS。 父主题： 日志转储
json_extract_scalar(x,json_path) varchar类型 示例及说明 json_extract函数 获取Results字段中EndTime字段的值。 字段样例 Results:[{"EndTime":1626314520},{"FireResult":2}] 查询和分析语句
概述 字段提取检查与覆盖模式，介绍字段提取模式mode参数的不同取值以及说明。请参考DSL加工（邀测）创建加工任务。 DSL加工的功能在邀测中，仅支持华北-北京四、华东-上海一、华南-广州局点的内测用户使用，其他局点暂不支持。 表1 参数说明 参数值 说明 fill 当目标字段不存在或者值为空时，设置目标字段。
Rebalance时间、原因和触发Rebalance的客户端等。重平衡日志存储在云日志服务（Log Tank Service，简称LTS）中，由LTS提供查询功能。 具体接入方法请参见查看Kafka重平衡日志。 父主题： 使用云服务接入LTS
场景七：数据转化纳秒级的Unix时间戳 部分场景需要云日志服务的数据加工才能够满足纳秒级精度时间戳的需求，当原始日志中存在Unix时间格式字段，您可以使用e_set字段操作函数，将其解析成纳秒精度的日志时间。 原始日志 { "source": "1.2.3.4", "time":
log_stream_name 否 String 日志流名称 offset 否 Integer 查询游标，初始传入0，后续从上一次的返回值中获取 limit 否 Integer 每页数据量，最大值为100 请求参数 表3 请求Header参数 参数 是否必选 参数类型 描述 X-Auth-Token
场景八：数据转化微秒级标准 ISO8601 时间戳 部分场景需要日志服务的数据加工满足高精度时间戳的需求，当原始日志中存在标准 ISO8601时间格式的字段，您可以使用e_set字段操作函数，将其解析成微秒精度的日志时间。 原始日志 { "source": "1.2.3.4"
长按/截图保存，微信识别二维码
或者关注公众号“华为云”
