数据湖探索 DLI-在Spark SQL作业中使用UDTF:开发流程

时间:2025-02-12 15:00:52

开发流程

DLI 下UDTF函数开发流程参考如下:
图1 UDTF开发流程
表2 开发流程说明

序号

阶段

操作界面

说明

1

新建Maven工程,配置pom文件

IntelliJ IDEA

参考操作步骤说明,编写UDTF函数代码。

2

编写UDTF函数代码

3

调试,编译代码并导出Jar包

4

上传Jar包到OBS

OBS控制台

将生成的UDTF函数Jar包文件上传到OBS目录下。

5

创建DLI的UDTF函数

DLI控制台

在DLI控制台的SQL作业管理界面创建使用的UDTF函数。

6

验证和使用DLI的UDTF函数

DLI控制台

在DLI作业中使用创建的UDTF函数。

support.huaweicloud.com/devg-dli/dli_09_0204.html