自定义hive的函数

最新推荐文章于 2024-11-19 15:58:54 发布

初入小萌新

最新推荐文章于 2024-11-19 15:58:54 发布

阅读量202

点赞数

CC 4.0 BY-SA版权

分类专栏： hive

本文链接：https://blog.youkuaiyun.com/qq_37321741/article/details/81265633

hive 专栏收录该内容

7 篇文章

订阅专栏

本文介绍了如何在Hive中使用自定义的用户定义函数(UDF)进行数据处理，包括字符串拼接和从复合字符串中解析特定键值的例子，并演示了如何部署和使用这些自定义函数。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

package com.udf;

import org.apache.hadoop.hive.ql.exec.UDF;

public class MyConcatUdf extends UDF{

	public String evaluate(String word) {
		if(word == null) {
			return "NULL";
		}
		return word+"_class";
	}
	public static void main(String[] args) {
		
	}
}

导出jar后

添加自定义的jar包

add jar /home/MyUDF/MyConcat.jar;

创建临时函数

create temporary function myconcat as 'com.udf.MyConcatUdf';

show functions;

退出以后就不行用了，当前session有效

第二个案例

根据key获取value

package com.udf;

import org.apache.hadoop.hive.ql.exec.UDF;
import org.json.JSONException;
import org.json.JSONObject;

public class KeyToValue extends UDF{
	public String evaluate(String allValue,String key) throws JSONException {
		if(allValue == null|| key==null) {
			return "NULL";
		}
		//正常取值
		//sex=1&weight=128&height&sla=30000
		allValue = allValue.replaceAll("&", ",");
		allValue = allValue.replaceAll("=", ":");
		allValue="{"+allValue+"}";
		JSONObject js = new JSONObject(allValue);
		String result = js.get(key).toString();
		return result;
	}
	public static void main(String[] args) throws JSONException {
		System.out.println(new KeyToValue().evaluate("sex=1&weight=128&height=180&sla=30000", "sex"));
	}
}

使用的过程相同