自定义hive的函数

本文介绍了如何在Hive中使用自定义的用户定义函数(UDF)进行数据处理,包括字符串拼接和从复合字符串中解析特定键值的例子,并演示了如何部署和使用这些自定义函数。

摘要生成于 C知道 ,由 DeepSeek-R1 满血版支持, 前往体验 >

package com.udf;

import org.apache.hadoop.hive.ql.exec.UDF;

public class MyConcatUdf extends UDF{

	public String evaluate(String word) {
		if(word == null) {
			return "NULL";
		}
		return word+"_class";
	}
	public static void main(String[] args) {
		
	}
}

导出jar后

添加自定义的jar包

add jar /home/MyUDF/MyConcat.jar;

创建临时函数

create temporary function myconcat as 'com.udf.MyConcatUdf';

show functions;

退出以后就不行用了,当前session有效

 

第二个案例

根据key获取value

package com.udf;

import org.apache.hadoop.hive.ql.exec.UDF;
import org.json.JSONException;
import org.json.JSONObject;

public class KeyToValue extends UDF{
	public String evaluate(String allValue,String key) throws JSONException {
		if(allValue == null|| key==null) {
			return "NULL";
		}
		//正常取值
		//sex=1&weight=128&height&sla=30000
		allValue = allValue.replaceAll("&", ",");
		allValue = allValue.replaceAll("=", ":");
		allValue="{"+allValue+"}";
		JSONObject js = new JSONObject(allValue);
		String result = js.get(key).toString();
		return result;
	}
	public static void main(String[] args) throws JSONException {
		System.out.println(new KeyToValue().evaluate("sex=1&weight=128&height=180&sla=30000", "sex"));
	}
}

 

使用的过程相同

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值