安装HIVE

本文详细介绍了Hive的安装步骤、配置环境、连接MySQL、创建数据库账户、权限设置、修改hive-site.xml文件以及启动Hive的过程。

下载地址:http://archive.cloudera.com/cdh/3/

以版本 hive-0.7.1 为例

解压到安装路径: tar -xvf hive-0.7.1.tar.gz 

将/conf/hive-env.sh.template 配置环境模板 拷贝一份

cp hive-env.sh.template hive-env.sh


添加以下配置项

#Hadoop 安装路径

HADOOP_HOME=/usr/local/hadoop/hadoop-0.20.2

#hive安装路径

export HIVE_HOME=/usr/local/hadoop/hive-0.7.1-cdh3u6

export PATH=$PATH:$HIVE_HOME/bin

#配置Ant LIB 库(启动后台管理服务需要用到)

export ANT_LIB=$ANT_HOME/lib


安装MySQL(略)

安装方法网上很多,这里就不介绍了。

安装完成后,可以使用命令行链接Mysql


mysql -h localhost -u root -p

创建个hive账户

CREATE USER 'hive' IDENTIFIED BY ‘123456;  

#添加权限

GRANT ALL PRIVILEGES ON *.* TO 'hive'@'%' WITH GRANT OPTION;  

建立Hive专用的元数据库 

create database hive  


修改hive-site.xml

(如果没有该文件,复制hive-default.xml并改名为hive-site.xml)

<property>

  <name>javax.jdo.option.ConnectionURL</name>

  <value>jdbc:mysql://localhost:3306/hive?createDatabaseIfNotExist=true</value>

  <description>JDBC connect string for a JDBC metastore</description>

</property>

<property>

  <name>javax.jdo.option.ConnectionDriverName</name>

  <value>com.mysql.jdbc.Driver</value>

  <description>Driver class name for a JDBC metastore</description>

</property>

<property>

  <name>javax.jdo.option.ConnectionUserName</name>

  <value>hive</value>

  <description>username to use against metastore database</description>

</property>

<property>

  <name>javax.jdo.option.ConnectionPassword</name>

  <value>123456</value>

  <description>password to use against metastore database</description>

</property>



把MySQL的JDBC驱动包(mysql-connector-java-5.1.*-bin.jar)复制到Hive的lib目录下。

启动hive

[root@idc01-vm-test-124 bin]# ./hive

Hive history file=/tmp/root/hive_job_log_root_201404201145_884718504.txt

hive> 


show tables;

OK

Time taken: 2.962 seconds


#创建元数据表

hive> create table lss(id int,name string,age int) ROW FORMAT DELIMITED FIELDS TERMINATED BY '\t'; 

OK

Time taken: 0.467 seconds

#查看创建的表


hive> show tables;

OK

lss


#SELECT

hive> select  * from lss;

OK


#接下来我们进入MySQL中看下hive库的信息

mysql> use hive;

Database changed

mysql> show tables;

+-----------------+

| Tables_in_hive  |

+-----------------+

| BUCKETING_COLS  |

| COLUMNS         |

| DATABASE_PARAMS |

| DBS             |

| PARTITION_KEYS  |

| SDS             |

| SD_PARAMS       |

| SEQUENCE_TABLE  |

| SERDES          |

| SERDE_PARAMS    |

| SORT_COLS       |

| TABLE_PARAMS    |

| TBLS            |

+-----------------+

13 rows in set (0.00 sec)


mysql> select * from TBLS;

+--------+-------------+-------+------------------+-------+-----------+-------+----------+---------------+--------------------+--------------------+

| TBL_ID | CREATE_TIME | DB_ID | LAST_ACCESS_TIME | OWNER | RETENTION | SD_ID | TBL_NAME | TBL_TYPE      | VIEW_EXPANDED_TEXT | VIEW_ORIGINAL_TEXT |

+--------+-------------+-------+------------------+-------+-----------+-------+----------+---------------+--------------------+--------------------+

|      1 |  1397961996 |     1 |                0 | root  |         0 |     1 | kevin    | MANAGED_TABLE | NULL               | NULL               |

|      6 |  1397965611 |     1 |                0 | root  |         0 |     6 | lss      | MANAGED_TABLE | NULL               | NULL               |

+--------+-------------+-------+------------------+-------+-----------+-------+----------+---------------+--------------------+--------------------+

2 rows in set (0.00 sec)

### Hive 安装教程 以下是关于 Hive安装步骤及其相关内容: #### 1. 环境准备 为了成功安装和配置 Hive,需要满足以下前提条件: - JDK 版本需为 1.8 或更高版本[^2]。 - MySQL 数据库版本应为 5.7 或以上,用于存储 Hive 的元数据[^2]。 - Hadoop 需要已安装并正常运行,建议版本为 2.2.0 或更新版本[^2]。 #### 2. 下载与解压 Hive 从 Apache 官方网站或其他可信源下载适合的 Hive 压缩包(推荐版本为 2.3.1),将其解压缩到目标路径。假设解压后的目录名为 `apache-hive-2.3.1-bin`[^2]。 #### 3. 修改环境变量 编辑系统的环境变量文件(如 `.bashrc` 或 `/etc/profile`),添加如下内容以设置 Hive 路径: ```bash export HIVE_HOME=/path/to/apache-hive-2.3.1-bin export PATH=$PATH:$HIVE_HOME/bin ``` 执行 `source ~/.bashrc` 或 `source /etc/profile` 来使更改生效。 #### 4. 创建 MySQL 元数据库 在 MySQL 中创建一个新的数据库供 Hive 使用,并赋予相应的权限给指定用户。例如: ```sql CREATE DATABASE hive_db; GRANT ALL PRIVILEGES ON hive_db.* TO 'hive_user'@'localhost' IDENTIFIED BY 'password'; FLUSH PRIVILEGES; ``` #### 5. 初始化 Hive Schema 通过以下命令初始化 Hive 的 MySQL schema: ```bash schematool -dbType mysql -initSchema ``` 此命令会基于 MySQL 连接信息构建必要的表结构[^3]。 #### 6. 启动 Hive 可以通过两种方式启动 Hive: - **命令行模式**:直接输入 `hive` 即可进入交互式 Shell[^4]。 - **Beeline JDBC 方式**:先启动 HiveServer2 服务再连接客户端。具体操作如下: ```bash $HIVE_HOME/bin/hiveserver2 & beeline -u jdbc:hive2://localhost:10000 ``` #### 示例代码展示 下面是一个简单的 Hive SQL 执行例子: ```sql -- 创建测试数据库 CREATE DATABASE IF NOT EXISTS test_db; -- 查看当前所有数据库 SHOW DATABASES; -- 切换至新创建的数据库 USE test_db; -- 构建一张样例表 CREATE TABLE example_table ( id INT, name STRING ); -- 插入几条记录 INSERT INTO example_table VALUES (1, 'Alice'), (2, 'Bob'); ```
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值