
spark Java hive UDF函数
文章平均质量分 72
青龙悟空
goooooooooooooooooooo
展开
-
hive udf 大小写转换,解析json案例
把 hive 安装目录下的lib 添加到java项目中 简单UDF示例 1、先开发一个java类,继承UDF,并重载evaluate方法 package com.hive.udf; import org.apache.hadoop.hive.ql.exec.UDF; public class ToLowerCase extends UDF { public String evaluate(String field) { ...原创 2021-02-09 10:59:50 · 634 阅读 · 2 评论 -
大数据 java01 hive udf函数(手机号码脱敏)
Hive UDF Hive UDF 函数 1 POM 文件 2.UDF 函数 3 利用idea打包 4 添加hive udf函数 4.1 上传jar包到集群 4.2 修改集群hdfs文件权限 4.3 注册UDF 4.4 使用UDF Hive UDF 函数 1 POM 文件 <?xml version="1.0" encoding="UTF-8"?> <project xmlns="http://maven.apache..原创 2021-02-09 09:38:59 · 423 阅读 · 0 评论 -
Spark案例分析——不同区域热点商品分析udf
数据来源有三张表: user_visit_action,描述用户点击信息,存储在hive中 模拟数据如下:有效信息date,点击时间,city_id城市,order_product_id用户点击商品的id date,user_id,session_id,page_id,action,city_id,search_keywords,order_product_id 2018/5/1,,,,,010,,1011 2018/5/1,,,,,010,,1011 20.原创 2020-12-28 17:17:09 · 278 阅读 · 0 评论