-
修订记录 - 数据湖探索 DLI
修订记录 发布日期 修订记录 2023-07-12 新增入门实践章节。 2023-01-10 调整手册结构,新增入门指引、注册华为帐号并开通华为云。 2022-07-28 新增创建并提交Flink OpenSource SQL作业。 Flink SQL EOS,下线“创建并提交Flink
-
修订记录 - 数据湖探索 DLI
修订记录 发布日期 修订记录 2024-05-27 第四次正式发布。 修改怎样排查DLI计费异常? 2024-04-18 第三次正式发布。 下线队列计费相关内容。 2023-12-07 第二次正式发布。 扫描量计费,补充说明扫描量计费的约束与限制。 2023-07-30 第一次正式发布。
-
修订记录 - 数据湖探索 DLI
修订记录 发布日期 修订记录 2024-06-27 新增 使用Hive语法创建OBS表补充关于指定多字符的分隔符的说明。 使用Hive语法创建DLI表补充说明Hive DLI表不支持在建表时指定多字符的分隔符。 2024-05-28 新增 批作业SQL常用配置项说明新增配置参数:spark
-
attr - 数据湖探索 DLI
表的字段,与col_name相同。 const_value 常量值。 case_expr case表达式。 math_func 数学函数。 date_func 日期函数。 string_func 字符串函数。 aggregate_func 聚合函数。 window_func 分析窗口函数。 user_define_func
-
attr - 数据湖探索 DLI
表的字段,与col_name相同。 const_value 常量值。 case_expr case表达式。 math_func 数学函数。 date_func 日期函数。 string_func 字符串函数。 aggregate_func 聚合函数。 window_func 分析窗口函数。 user_define_func
-
修订记录 - 数据湖探索 DLI
修订记录 发布日期 修订记录 2024-05-07 Flink 1.15语法新增DWS Connector概述。 2024-04-23 Flink 1.15语法新增Doris。 2024-04-18 新增Flink Opensource SQL1.15语法参考。 2024-01-29
-
string - 数据湖探索 DLI
登录DLI管理控制台,选择“作业管理 > Flink作业”。 单击对应的Flink作业名称,选择“运行日志”,单击“OBS桶”,根据作业运行的日期,找到对应日志的文件夹。 进入对应日期的文件夹后,找到名字中包含“taskmanager”的文件夹进入,下载获取taskmanager.out文件查看结果日志。
-
string - 数据湖探索 DLI
登录DLI管理控制台,选择“作业管理 > Flink作业”。 单击对应的Flink作业名称,选择“运行日志”,单击“OBS桶”,根据作业运行的日期,找到对应日志的文件夹。 进入对应日期的文件夹后,找到名字中包含“taskmanager”的文件夹进入,下载获取taskmanager.out文件查看结果日志。
-
string - 数据湖探索 DLI
登录DLI管理控制台,选择“作业管理 > Flink作业”。 单击对应的Flink作业名称,选择“运行日志”,单击“OBS桶”,根据作业运行的日期,找到对应日志的文件夹。 进入对应日期的文件夹后,找到名字中包含“taskmanager”的文件夹进入,下载获取taskmanager.out文件查看结果日志。
-
bround - 数据湖探索 DLI
格式。 代表需要被四舍五入的值。 该命令与传统四舍五入方式的区别在于,对数字5进行操作时,由前一位数字来决定,前一位数字为奇数,增加一位,前一位数字为偶数,舍弃一位。 参数a非DOUBLE类型时,会隐式转换为DOUBLE类型后参与运算。 d 否 DOUBLE、BIGINT、DECIMAL、STRING类型。
-
bround - 数据湖探索 DLI
格式。 代表需要被四舍五入的值。 该命令与传统四舍五入方式的区别在于,对数字5进行操作时,由前一位数字来决定,前一位数字为奇数,增加一位,前一位数字为偶数,舍弃一位。 参数a非DOUBLE类型时,会隐式转换为DOUBLE类型后参与运算。 d 否 DOUBLE、BIGINT、DECIMAL、STRING类型。
-
修订记录 - 数据湖探索 DLI
修订记录 发布日期 修订记录 2024-06-20 数据保护技术补充Spark作业和Flink作业开通加密通信配置说明。 2024-03-30 新增产品规格。 2024-03-04 权限管理,补充增强型跨源连接权限与系统权限的说明。 2023-09-18 约束与限制补充增强型跨源
-
Debezium Format - 数据湖探索 DLI
登录DLI管理控制台,选择“作业管理 > Flink作业”。 单击对应的Flink作业名称,选择“运行日志”,单击“OBS桶”,根据作业运行的日期,找到对应日志的文件夹。 进入对应日期的文件夹后,找到名字中包含“taskmanager”的文件夹进入,下载获取.out文件查看结果日志。 -U[111, scooter
-
修订记录 - 数据湖探索 DLI
修订记录 发布日期 修订记录 2024-07-01 修改DLI委托相关常见问题的描述信息。 2024-05-06 新增怎样升级DLI作业的引擎版本。 2024-04-29 移动计费类常见问题至计费说明手册中。 2024-04-07 修改通用队列操作OBS表如何设置AK/SK。 2024-03-30
-
创建队列 - 数据湖探索 DLI
说明 queue_name 是 String 新建的队列名称,名称只能包含数字、英文字母和下划线,但不能是纯数字,且不能以下划线开头。长度限制:1~128个字符。 说明: 队列名称不区分大小写,系统会自动转换为小写。 queue_type 否 String 队列的类型,。有如下类型:
-
修订记录 - 数据湖探索 DLI
修订记录 发布日期 修订记录 2024-07-01 创建自定义镜像,修改基础镜像的获取方式。 2024-05-30 云审计服务支持的DLI操作列表说明新增Flink Jar作业和Flink模板相关审计事件。 2024-05-23 新增建立DLI与共享VPC中资源的网络连接。 2024-05-22
-
弹性扩缩容定时任务 - 数据湖探索 DLI
输入定时任务的名称。 只能包含数字、英文字母和下划线,但不能是纯数字,不能以下划线开头,且不能为空。 输入长度不能超过128个字符。 激活任务 激活队列扩缩容定时任务。默认开启。如果关闭,则系统不会触发执行当前设置的定时规格变更任务。 有效期 设置执行定时任务的时间段。包括“日期”和“时间”。 说明:
-
Print结果表 - 数据湖探索 DLI
登录DLI管理控制台,选择“作业管理 > Flink作业”。 单击对应的Flink作业名称,选择“运行日志”,单击“OBS桶”,根据作业运行的日期,找到对应日志的文件夹。 进入对应日期的文件夹后,找到名字中包含“taskmanager”的文件夹进入,下载获取taskmanager.out文件查看结果日志。
-
Print - 数据湖探索 DLI
登录DLI管理控制台,选择“作业管理 > Flink作业”。 单击对应的Flink作业名称,选择“运行日志”,单击“OBS桶”,根据作业运行的日期,找到对应日志的文件夹。 进入对应日期的文件夹后,找到名字中包含“taskmanager”的文件夹进入,下载获取taskmanager.out文件查看结果日志。
-
数学运算函数 - 数据湖探索 DLI
不支持隐式类型转换。 算术运算符 算术运算符包括双目运算符与单目运算符,这些运算符都将返回数字类型。Flink SQL所支持的算术运算符如表3所示。 表3 算术运算符 运算符 返回类型 描述 + numeric 所有数字类型 返回数字。 - numeric 所有数字类型 返回负数。