fengjinghong的博客

参考

#!bin/bash#获取主机名read -p 'please input your hostname:' NAME#后台启动hiveserver2nohup hiveserver2 1>/dev/null 2>&1 &#启动beeline 进行连接，AzF是连接的用户名beeline -u jdbc:hive2://$NAME:10000 -n AzF

分区表：分区表实际上就是对应一个HDFS文件系统上的独立的文件夹，该文件夹下是该分区所有的数据文件。Hive中的分区就是分目录，把一个大的数据集根据业务需要分割成小的数据集。在查询时通过WHERE子句中的表达式选择查询所需要的指定的分区，这样的查询效率会提高很多。(分区，“伪列”)。源数据：10 ACCOUNTING bj20 RESEARCH sh30 SALES cq40 OPERATIONS gz创建分区表语法：0: jdbc:hive2://bigdata01:10000&.

1、下载Oracle SQL Developerhttp://www.oracle.com/technetwork/developer-tools/sql-developer/downloads/index.html注：由于我的电脑上已经安装了JDK，所以下载不包含的JDK的版本。下载后：得到软件包sqldeveloper-18.1.0.095.1630-no-jre.zip运行Oracle SQL Developer：解压缩上面所下载的软件包，直接运行sqldeveloper.exe文件即可。

1．Hive官网地址：http://hive.apache.org/3．下载地址：http://archive.apache.org/dist/hive/1．Hive安装及配置（1）把apache-hive-1.2.1-bin.tar.gz上传到linux的/opt/software目录下（2）解压apache-hive-1.2.1-bin.tar.gz到/opt/module/目录下面[AzF@bigdata01 software]$ tar -zxvf apache-hive-1.2.1-.

一、MySql安装注意：安装过程中注意权限问题（1）安装包准备1．查看mysql是否安装，如果安装了，卸载mysql（1）查看[root@bigdata01 桌面]# rpm -qa|grep mysqlmysql-libs-5.1.73-7.el6.x86_64（2）卸载[root@bigdata01 桌面]# rpm -e --nodeps mysql-libs-5.1.73-7.el6.x86_642．解压mysql-libs.zip文件到当前目录[root@big

报错信息：Exception in thread "main" java.lang.RuntimeException: java.lang.RuntimeException: Unable to instantiate org.apache.hadoop.hive.ql.metadata.SessionHiveMetaStoreClient at org.apache.hadoop.hive.ql.session.SessionState.start(SessionState.ja.

将本地/opt/module/datas/stu.txt这个目录下的数据导入到hive的stu(id int,，name string)表中。准备工作：源数据：（注意以：“\t” 分割，tab键）1001 hadoop1002 scala1003 hive启动hive，使用默认的数据库。创建stu表create table stu(id int,name string) ROW FORMAT DELIMITED FIELDS TERMINATED BY '\t.

1、完全分布式中hive的执行模式参考博客问题描述：Hive在执行job任务时候卡死并报出信息：Number of reduce tasks is set to 0 since there’s no reduce operator（翻译：由于没有减少操作符，减少任务数被设置为0），如图：这样的情况下，Hive 已经无法继续执行，只能退出重启hive(但是依然不能执行)。这是因为虽然输入文件很小，但是需要加载的文件很大，根本吃不消。解决问题：Hive支持任务执行选择本地模式(local mode