数据湖探索 DLI-在Spark SQL作业中使用UDTF:开发流程
开发流程

序号 |
阶段 |
操作界面 |
说明 |
---|---|---|---|
1 |
新建Maven工程,配置pom文件 |
IntelliJ IDEA |
参考操作步骤说明,编写UDTF函数代码。 |
2 |
编写UDTF函数代码 |
||
3 |
调试,编译代码并导出Jar包 |
||
4 |
上传Jar包到OBS |
OBS控制台 |
将生成的UDTF函数Jar包文件上传到OBS目录下。 |
5 |
创建DLI的UDTF函数 |
DLI控制台 |
在DLI控制台的SQL作业管理界面创建使用的UDTF函数。 |
6 |
验证和使用DLI的UDTF函数 |
DLI控制台 |
在DLI作业中使用创建的UDTF函数。 |