# 题目重述
根据提供的文档要求，在 CentOS7 虚拟机（IP: 192.168.128.130，用户名：root）上完成 Apache
Hive 4.0.0 的
安装与
配置，包括设置 Derby 内嵌
模式、MySQL 直连
模式及
远程 Metastore
模式。需提供完整操作命令和
配置文件路径。
---
# 详解
### ✅ **1. 设置内嵌 Derby
模式**
#### 步骤 1：解压
Hive 安装包
```bash
cd /export/
server/
tar zxvf apache
-hive-4.0.0
-bin.tar.gz
mv apache
-hive-4.0.0
-bin
hive
```
#### 步骤 2：解决 Guava 版本冲突
```bash
cd /export/
server/
hive
rm
-rf lib/guava
-*.jar
cp /export/
server/hadoop/share/hadoop/common/lib/guava
-27.0
-jre.jar ./lib/
```
> ⚠️ 确保 Hadoop 已
安装在 `/export/
server/hadoop`，否则请修改路径或先
安装 Hadoop。
#### 步骤 3：
配置 `
hive-env.sh`
```bash
cd /export/
server/
hive/conf
cp
hive-env.sh.template
hive-env.sh
vim /export/
server/
hive/conf/
hive-env.sh
```
在文件末尾添加以下内容：
```bash
export HADOOP_HOME=/export/
server/hadoop
export
HIVE_CONF_DIR=/export/
server/
hive/conf
export
HIVE_AUX_JARS_PATH=/export/
server/
hive/lib
```
#### 步骤 4：初始化 Derby 元数据库
```bash
cd /export/
server/
hive
bin/schematool
-dbType derby
-initSchema
```
#### 步骤 5：启动
Hive CLI
```bash
bin/
hive
```
此
时将进入
Hive 命令行界面，Derby
模式仅支持单会话，不适用于生产环境。
---
### ✅ **2.
安装 MySQL 并
配置直连
模式（基于 MySQL）**
#### 步骤 1：
安装 MySQL
##### 解压 MySQL
```bash
cd /export/
server/
tar
-xzf mysql
-5.7.43
-linux
-glibc2.12
-x86_64.tar.gz
mv mysql
-5.7.43
-linux
-glibc2.12
-x86_64 mysql
```
##### 创建用户组和用户
```bash
groupadd mysql
useradd
-r
-g mysql mysql
```
##### 修改权限
```bash
chown
-R mysql:mysql /export/
server/mysql
chmod
-R 755 /export/
server/mysql
```
##### 初始化数据库
```bash
cd /export/
server/mysql
./bin/mysqld
--initialize
--user=mysql
--basedir=/export/
server/mysql
--datadir=/export/
server/mysql/data
```
> 记录生成的临
时密码（如：`A temporary password is generated for root@localhost: abc123!`）
##### 启动 MySQL
```bash
./support
-files/mysql.
server start
```
##### 添加到系统服务（可选）
```bash
cp support
-files/mysql.
server /etc/init.d/mysqld
chkconfig
--add mysqld
chkconfig mysqld on
```
##### 设置环境变量
```bash
echo 'export PATH=$PATH:/export/
server/mysql/bin' >> /etc/profile
source /etc/profile
```
##### 登录并修改密码
```bash
mysql
-u root
-p
```
输入临
时密码后执行：
```sql
ALTER USER 'root'@'localhost' IDENTIFIED BY '123456';
GRANT ALL PRIVILEGES ON *.* TO 'root'@'%' IDENTIFIED BY '123456';
FLUSH PRIVILEGES;
EXIT;
```
#### 步骤 2：下载并添加 MySQL JDBC 驱动
```bash
cd /export/
server/
wget https://repo1.maven.org/maven2/mysql/mysql
-connector
-java/5.1.49/mysql
-connector
-java
-5.1.49.jar
cp mysql
-connector
-java
-5.1.49.jar /export/
server/
hive/lib/
```
> 若无法 wget，请手动上传 `mysql
-connector
-java
-5.1.32.jar` 或更高版本至 `/export/
server/`。
---
### ✅ **3.
配置远程 Metastore
模式（推荐）**
#### 步骤 1：创建
Hive 元数据数据库
```bash
mysql
-u root
-p
```
输入密码后执行：
```sql
CREATE DATABASE IF NOT EXISTS
hive CHARACTER SET utf8 COLLATE utf8_general_ci;
GRANT ALL PRIVILEGES ON
hive.* TO 'root'@'%' IDENTIFIED BY '123456';
FLUSH PRIVILEGES;
EXIT;
```
#### 步骤 2：
配置 `
hive-site.xml`
```bash
vim /export/
server/
hive/conf/
hive-site.xml
```
写入以下内容：
```xml
<configuration>
<!
-- 存储元数据 MySQL 相关
配置 -->
<property>
<name>javax.jdo.option.ConnectionURL</name>
<value>jdbc:mysql://192.168.128.130:3306/
hive?createDatabaseIfNotExist=true&useSSL=false&useUnicode=true&characterEncoding=UTF
-8</value>
</property>
<property>
<name>javax.jdo.option.ConnectionDriverName</name>
<value>com.mysql.jdbc.Driver</value>
</property>
<property>
<name>javax.jdo.option.ConnectionUserName</name>
<value>root</value>
</property>
<property>
<name>javax.jdo.option.ConnectionPassword</name>
<value>123456</value>
</property>
<!
-- Hiveserver2 绑定地址
-->
<property>
<name>
hive.
server2.thrift.bind.host</name>
<value>192.168.128.130</value>
</property>
<property>
<name>
hive.
server2.thrift.port</name>
<value>10000</value>
</property>
<!
-- 远程 Metastore 服务地址
-->
<property>
<name>
hive.metastore.uris</name>
<value>thrift://192.168.128.130:9083</value>
</property>
<!
-- 关闭元数据存储验证
-->
<property>
<name>
hive.metastore.schema.verification</name>
<value>false</value>
</property>
<!
-- 允许通过 JDBC 访问
-->
<property>
<name>
hive.metastore.event.db.notification.api.auth</name>
<value>false</value>
</property>
<!
-- 数据仓库目录
-->
<property>
<name>
hive.metastore.warehouse.dir</name>
<value>/user/
hive/warehouse</value>
</property>
</configuration>
```
#### 步骤 3：初始化 MySQL 元数据
```bash
cd /export/
server/
hive
bin/schematool
-initSchema
-dbType mysql
-verbose
```
> 若提示连接失败，请检查 MySQL 是否允许
远程访问、防火墙是否关闭、JDBC 驱动是否存在。
#### 步骤 4：启动 Metastore 服务（后台运行）
```bash
nohup /export/
server/
hive/bin/
hive --service metastore > /export/
server/
hive/logs/metastore.log 2>&1 &
```
> 日志输出至 `logs/metastore.log`，便于排查错误。
#### 步骤 5：启动
HiveServer2（可选，用于 JDBC 连接）
```bash
nohup /export/
server/
hive/bin/
hive --service
hiveserver2 > /export/
server/
hive/logs/
hiveserver2.log 2>&1 &
```
---
### ✅ **4. 使用
Hive 客户
端**
```bash
/export/
server/
hive/bin/
hive
```
测试：
```sql
SHOW DATABASES;
CREATE TABLE test(id INT);
DROP TABLE test;
```
---
### ✅ **5. 在其他节点使用
Hive（Slave 节点
配置）**
#### 将
Hive 安装包复制到从节点
```bash
scp
-r /export/
server/
hive slave1:/export/
server/
scp
-r /export/
server/
hive slave2:/export/
server/
```
#### 同步环境变量
```bash
echo 'export
HIVE_HOME=/export/
server/
hive' >> /etc/profile
echo 'export PATH=$PATH:$
HIVE_HOME/bin' >> /etc/profile
source /etc/profile
```
然后发送到从节点：
```bash
scp /etc/profile slave1:/etc/
scp /etc/profile slave2:/etc/
```
在 `slave1` 和 `slave2` 上执行：
```bash
source /etc/profile
```
#### 修改从节点 `
hive-site.xml`
只需保留如下
配置（指定 Metastore 地址）：
```xml
<configuration>
<property>
<name>
hive.metastore.uris</name>
<value>thrift://192.168.128.130:9083</value>
</property>
</configuration>
```
#### 测试连接
```bash
hive
SHOW DATABASES;
```
---
# ❗常见问题处理
### 🔹 初始化失败：`ClassNotFoundException: com.mysql.jdbc.Driver`
- 原因：缺少 MySQL JDBC 驱动。
- 解决：确认已将 `mysql
-connector
-java
-x.x.xx.jar` 放入 `$
HIVE_HOME/lib/`。
### 🔹 连接被拒绝：`Access denied for user 'root'@'ip'`
- 解决：确保授权 `%` 用户：
```sql
GRANT ALL ON *.* TO 'root'@'%' IDENTIFIED BY '123456';
FLUSH PRIVILEGES;
```
### 🔹 格式化失败后重新初始化
```bash
# 删除 HDFS 上的元数据目录（如果存在）
hdfs dfs
-rm
-r /user/
hive
# 删除 MySQL 中的数据库
mysql
-u root
-p
-e "DROP DATABASE IF EXISTS
hive; CREATE DATABASE
hive CHARACTER SET utf8;"
```
再重新运行：
```bash
schematool
-initSchema
-dbType mysql
-verbose
```
---
# 知识点
- **
Hive 元数据管理机制**：
Hive 使用 Metastore 存储表结构等元信息，可使用 Derby（本地）、MySQL（
远程）等方式存储。
- **JDBC 驱动集成原理**：Java 应用通过 JDBC 驱动连接数据库，需将对应 jar 包放入 classpath（即 lib 目录）。
- **Metastore
远程服务
模式**：通过 `thrift://host:port` 提供元数据服务，实现多客户
端共享元数据，适合集群部署。
博客记录了查阅资料时找到的讲解较好的博客截图，目的是作为备忘录使用。
扫一扫
1765
被折叠的 条评论
为什么被折叠?
到【灌水乐园】发言
