香宝的私房小厨

hive是什么（官网概念)Apache Hive™数据仓库软件有助于使用SQL读取，写入和管理驻留在分布式存储中的大型数据集。可以将结构投影到已存储的数据上。提供命令行工具和JDBC驱动程序，用于将用户连接到Hive。Hive 是建立在Hadoop (HDFS/MR)上的用于管理和查询结果化/非结构化的数据仓库；一种可以存储、查询和分析存储在Hadoop 中的大规模数据的机制；Hive...

这篇文章介绍下如何创建一个简单的自定义Hive函数并在如何Hive中使用它，其实Hive语法还挺不简单，这里我们只提供一个思路，一个常规的开发实例供大家参考。1， Java程序编写自定义函数import org.apache.commons.lang3.StringUtils; import org.apache.hadoop.hive.ql.exec.UDF; import j...

介绍写如何将hive整合到sparkSql中使用，因为公司一些老hadoop框架中的hive一直保留着，但spark框架也要使用hive怎么办呐，很简单，配置文件搞一下就可以了。（注意hive和spark的版本是有对应关系的，去官网查下，下载对应的hive和spark，否则启动会报错。1，配置文件在spark的conf目录中添加hdfs-site.xml 和 hive-site.xml...