
hive
爱笑的T_T
工作
展开
-
[Hive]那些年踩过的Hive坑
转:http://blog.youkuaiyun.com/sunnyyoona/article/details/516488711. 缺少MySQL驱动包1.1 问题描述Caused by: org.datanucleus.store.rdbms.connectionpool.DatastoreDriverNotFoundException: The specified d转载 2017-02-08 11:42:36 · 3487 阅读 · 0 评论 -
hive2.0版本整合hbase1.2.1
转:http://blog.youkuaiyun.com/wulantian/article/details/38111683 本文主要实现一下目标: 1. 在hive中创建的表能直接创建保存到hbase中。 2. hive中的表插入数据,插入的数据会同步更新到hbase对应的表中。 3. hbase对应的列簇值变更,也会在Hive中对应的表中变更。 4. 实现了多转载 2017-02-08 15:35:29 · 1403 阅读 · 0 评论 -
hive 内部表,外部表,分区
Hive的数据分为表数据和元数据,表数据是Hive中表格(table)具有的数据;而元数据是用来存储表的名字,表的列和分区及其属性,表的属性(是否为外部表等),表的数据所在目录等。Hive本身是没有专门的数据存储格式,也没有为数据建立索引,只需要在创建表的时候告诉Hive数据中的列分隔符和行分隔符,Hive就可以解析数据。所以往Hive表里面导入数据只是简单的将数据移动到表所在的目录中(如果数转载 2017-04-18 17:31:40 · 718 阅读 · 0 评论 -
hive 分桶表
#创建分桶表create table stu_buck(sno int,sname string,sex string,sage int,sdept string)clustered by(sno) sorted by(sno DESC)into 4 bucketsrow format delimitedfields terminated by ',';#设置变量,转载 2017-04-18 17:33:50 · 1139 阅读 · 0 评论 -
hive常用函数
转:http://blackproof.iteye.com/blog/2108353内容较多,见《Hive官方文档》https://cwiki.apache.org/confluence/display/Hive/LanguageManual+UDF测试各种内置函数的快捷方法:1、创建一个dual表create table dual(id string);2、loa转载 2017-04-20 16:07:14 · 454 阅读 · 0 评论 -
hive UDF开发实例
把 hive 安装目录下的lib 添加到java项目中简单UDF示例1、先开发一个java类,继承UDF,并重载evaluate方法package com.hive.udf;import org.apache.hadoop.hive.ql.exec.UDF;public class ToLowerCase extends UDF { public String转载 2017-04-20 16:36:02 · 1154 阅读 · 0 评论 -
hive hql 语句
保存select查询结果的几种方式:1、将查询结果保存到一张新的hive表中create table t_tmpasselect * from t_p;2、将查询结果保存到一张已经存在的hive表中insert into table t_tmpselect * from t_p;3、将查询结果保存到指定的文件目录(可以是本地,也可以是hdfs)inse转载 2017-04-21 11:01:16 · 1098 阅读 · 0 评论 -
hive2.1.1安装部署
转:http://blog.youkuaiyun.com/zhongguozhichuang/article/details/52702476一、Hive 运行模式与 Hadoop 类似,Hive 也有 3 种运行模式:1. 内嵌模式将元数据保存在本地内嵌的 Derby 数据库中,这是使用 Hive 最简单的方式。但是这种方式缺点也比较明显,因为一个内嵌的 Derby转载 2017-01-22 15:30:16 · 11431 阅读 · 1 评论