Hive-自定义函数

Spark函数详解

1. 系统内置函数

-- 返回 所有自带的函数
show functions

-- 返回对该函数的解释
desc function spilt 
-- 返回对该函数的使用例子
desc function extended split 

2. 自定义函数

1. UDF:user-defined function 
				datediff,	date_format 等函数  一进一出
2. UDAF:user-defined  aggregation function  
				聚合函数 count, max, min  一进多出
3.  UDTF: user-defined table-generting function 
				lateral view explore() 一进多出 

以上的一, 多,指的不是韩式传进来多少参数,而是指的对多少行数据, 行,处理的结果出来多少行。
比如 split函数, 切分的是一行数据,结果是一个数组, 一个数组是一行数据,所以算是一进一出,是udf。

2.1 UDF

2.2 UDTF

2.3 UDAF

在spark中会使用。

评论
成就一亿技术人!
拼手气红包6.0元
还能输入1000个字符
 
红包 添加红包
表情包 插入表情
 条评论被折叠 查看
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值