xdkb159的博客

一、前言 hive自定义函数分为一些三种： UDF：用户自定义标量函数，输入输出为一对一，如内置的upper函数； UDAF：用户自定义聚合函数，输入输出为多对一，如内置的sum函数； UDTF：用户自定义表值函数，输入输出为一对多，如内置的explode函数； 二、自定义函数开发步骤 不管是哪种自定义函数，hive用户自定义函数从开发到使用都需要大致经过下面几个步骤： 编码实现类，继承相应的UDF类（不同类型的函数继承类不一样），并在相应的方法中实现业...

一、Aggregation协处理器Aggregation为了弥补Hbase作为列存储数据库，难以进行求和、计数、排序等操作，能够进行一些简单的聚合操作，Aggregation将计算放在了server端，即region上，减少了网络通讯开销。Aggregation有以下两种开启方式： 修改hbase-site.xml配置文件，启动全局aggregation，能操纵所有的表上的数据 <property> <name>hbase.coprocess.