[ 实现 ] Hive简单创建UDF

最新推荐文章于 2024-09-23 11:13:35 发布

景明。

最新推荐文章于 2024-09-23 11:13:35 发布

阅读量621

点赞数

文章标签： hive hadoop maven udf

本文链接：https://blog.youkuaiyun.com/weixin_51184877/article/details/115792281

版权

本文介绍了如何使用Maven创建Hive自定义函数(UDF)，包括编写代码、打包、加载到Hive及调用的过程。重点讲解了三种类型的UDF：一进一出(UDF)、多进一出(UDAF)和一进多出(UDTF)，并提供了具体实例。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

一、Hive自定义函数介绍：

UDF：一进一出

UDAF：多进一出，例如：count、max、min

UDTF：一进多出，例如：explode()

二、新建一个 Maven-quick start

在这里插入图片描述

参数修改

在这里插入图片描述

三、Maven依赖

<!-- hive-exec -->
<dependency>
  <groupId>org.apache.hive</groupId>
  <artifactId>hive-exec</artifactId>
  <version>1.1.0</version>
</dependency>

四、操作步骤

1.编辑UDF函数代码

import org.apache.hadoop.hive.ql.exec.UDF;
import java.util.UUID;

public class GeneratorUUID extends UDF {
    public String evaluxxate(){
        String uuid = UUID.randomUUID().toString().replaceAll("-","");
        return uuid;
    }
}

2.打包

如果你为了最后文件名显示的比较规范，那你可以在 pom 文件里的 <build> 添加下方代码。

<finalName>uuidUDF</finalName>

在这里插入图片描述

3.Hive 添加 jar包

启动服务
将打好的 jar 包 上传至 linux 下
启动 hive

add jar /opt/myudf.jar

在这里插入图片描述

4.创建/销毁临时函数

create temporary function guuid as 'com.nj.myudf.GeneratorUUID';

as 后面跟的是红框里的项目路径
创建完成
销毁函数

drop temporary function guuid;

5.调用函数

select guuid();

在这里插入图片描述