
hive
花纵酒
这个作者很懒,什么都没留下…
展开
-
Hive 的坑:Hive2:Unable to instantiate org.apache.hadoop.hive.ql.metadata.SessionHiveMetaStoreClient
启动hive没有问题,但是当执行show tables或者create database xxx时,报错FAILED: SemanticException org.apache.hadoop.hive.ql.metadata.HiveException: java.lang.RuntimeException: Unable to instantiate org.apache.hadoop.hi...原创 2018-11-13 11:36:46 · 192 阅读 · 0 评论 -
远程连接hive
启动hive服务端:静默启动服务启动客户端:原创 2019-04-07 22:05:12 · 1377 阅读 · 0 评论 -
hive笔记梳理
1/ HIVE是什么?HIVE是一个可以将sql翻译为MR程序的工具HIVE支持用户将HDFS上的文件映射为表结构,然后用户就可以输入SQL对这些表(HDFS上的文件)进行查询分析HIVE将用户定义的库、表结构等信息存储hive的元数据库(可以是本地derby,也可以是远程mysql)中2/ HIVE的用途?解放大数据分析程序员,不用自己写大量的mr程序来分析数据,只需要写sql脚本即...原创 2019-04-07 22:05:02 · 199 阅读 · 0 评论 -
hive-笔记
HIVE看起来就像一个大的数据库可以建表:1、表定义信息会被记录到hive的元数据库中2、会在HDFS上的hive库目录中创建一个跟表名一致的文件夹3、往表目录中放入文件,表就有了数据1/ DDL建表示例:create table t_test5(id int,name string)row format delimitedfields terminated by ',';...原创 2019-04-07 22:04:50 · 192 阅读 · 0 评论 -
hive表有数据,但count(*)返回0
解决办法:set hive.compute.query.using.stats=false ; 然后再跑一下。原创 2019-04-07 22:04:01 · 1120 阅读 · 0 评论 -
hive笔记
什么是hive hive基本思想 Hive是基于Hadoop的一个数据仓库工具(离线),可以将结构化的数据文件映射为一张数据库表,并提供类SQL查询功能。 为什么使用Hive 直接使用hadoop所面临的问题人员学习成本太高项目周期要求太短MapReduce实现复杂查询逻辑开发难度太大为什么要使用Hive操作接口采用类SQL语法,提供快速开发的能力。...转载 2019-04-09 10:00:10 · 404 阅读 · 0 评论 -
hive配置文件 hive-site.xml
<configuration> <property> <name>javax.jdo.option.ConnectionURL</name> <value>jdbc:mysql://localhost:3306/hive?createDatabaseIfNotExist=true</value> &...原创 2019-04-12 22:59:55 · 6678 阅读 · 0 评论 -
hive中beeline连接异常User:*** is not allowed to impersonate
异常处理Error: Could not open client transport with JDBC Uri: jdbc:hive2://hadoop01:10000: Failed to open new session: java.lang.RuntimeException: org.apache.hadoop.ipc.RemoteException(org.apache.hadoop....转载 2019-04-15 10:26:26 · 1479 阅读 · 0 评论 -
CentOS7下完全离线安装CDH6集群
文件下载首先一些安装CDH6集群的必须文件要先在外网环境先下载好。Cloudera Manager 6.0.1CM6 RPM:https://archive.cloudera.com/cm6/6.0.1/redhat7/yum/RPMS/x86_64/需要下载该链接下的所有RPM文件,由于jdk1.8我在环境准备部分已经手动安装了,所以可以不用下载RPMS/x86_64/目录下的jd...原创 2019-05-14 08:41:59 · 3692 阅读 · 1 评论