Hive搭建

1.安装MySQL(已安装跳过)

(1)下载yum Repository
wget -i -c http://dev.mysql.com/get/mysql57-community-release-el7-10.noarch.rpm
(2)安装yum Repository
yum -y install mysql57-community-release-el7-10.noarch.rpm
(3)安装mysql5.7
yum -y install mysql-community-server
(4)开机自启动
systemctl enable mysqld.service
(5)启动mysql
systemctl start mysqld.service
(6)查看状态
systemctl status mysqld.service
(7)获取临时密码
grep "password" /var/log/mysqld.log
(8)登录mysql
mysql -uroot -p
(9)关闭密码复杂验证
set global validate_password_policy=0;
set global validate_password_length=1;
(10)设置密码
alter user user() identified by "123456";
(11)修改权限
use mysql;

GRANT ALL PRIVILEGES ON *.* TO 'root'@'%' IDENTIFIED BY '123456' WITH GRANT OPTION; -- 修改权限

flush privileges; -- 刷新权限

select host,user,authentication_string from user; -- 查看权限
(12)卸载yum Repository
//因为安装了Yum Repository,以后每次yum操作都会自动更新,需要把这个卸载掉。
yum -y remove mysql57-community-release-el7-10.noarch

2.修改MySQL编码

修改mysql编码为UTF-8
#1.编辑配置文件
vim /etc/my.cnf
#2.追加以下内容
[client]
default-character-set = utf8mb4
[mysqld]
character-set-server = utf8mb4
collation-server = utf8mb4_general_ci

在这里插入图片描述

#3.重启mysql
systemctl resrart mysqld

在这里插入图片描述

#4.登录mysql
mysql -uroot -p123456

在这里插入图片描述

#5.查看mysql当前字符集
show variables like '%char%';

在这里插入图片描述

3.安装Hive

安装前提:mysql和hadoop必须已经成功启动
#1.在mysql中创建hive元数据库
create database hive character set "latin1";

在这里插入图片描述

1.上传hive并解压
(1)通过Xftp上传

在这里插入图片描述

(2)解压至/usr/local/soft/
tar -zxvf apache-hive-1.2.1-bin.tar.gz -C /usr/local/soft/
(3)修改目录名称
mv apache-hive-1.2.1-bin hive-1.2.1

在这里插入图片描述

2.进入hive-1.2.1/conf目录,复制备份文件并重命名
cp hive-env.sh.template hive-env.sh
cp hive-default.xml.template hive-site.xml

在这里插入图片描述

3.配置hive的配置文件

(hive的配置文件比较大,在linux中查找某项配置比较难,可以先将hive-site.xml文件复制到windows用文本编辑打开,然后ctrl+f查关键字修改,修改之后再放回到hive 的conf目录)

修改hive-env.sh
#加入三行内容(按自己的目录来)
HADOOP_HOME=/usr/local/soft/hadoop-2.7.6
JAVA_HOME=/usr/local/soft/jdk1.8.0_171
HIVE_HOME=/usr/local/soft/hive-1.2.1

在这里插入图片描述

修改 hive-site.xml
                <property>
					<name>javax.jdo.option.ConnectionURL</name>
					<value>jdbc:mysql://master:3306/hive?useSSL=false</value>
				</property>
				<property>
					<name>javax.jdo.option.ConnectionDriverName</name>
					<value>com.mysql.jdbc.Driver</value>
				</property>
				<property>
					<name>javax.jdo.option.ConnectionUserName</name>
					<value>root</value>
				</property>
				<property>
					<name>javax.jdo.option.ConnectionPassword</name>
					<value>123456</value>
				</property>
				<property>
					<name>hive.querylog.location</name>
					<value>/usr/local/soft/hive-1.2.1/tmp</value>
				</property>
				<property>
					<name>hive.exec.local.scratchdir</name>
					<value>/usr/local/soft/hive-1.2.1/tmp</value>
				</property>
				<property>
					<name>hive.downloaded.resources.dir</name>
					<value>/usr/local/soft/hive-1.2.1/tmp</value>
				</property>

在这里插入图片描述
在这里插入图片描述
在这里插入图片描述
在这里插入图片描述
在这里插入图片描述
在这里插入图片描述
在这里插入图片描述

拷贝mysql驱动到$HIVE_HOME/lib目录下
cp mysql-connector-java-5.1.49.jar /usr/local/soft/hive-1.2.1/lib/
将hive的jline-2.12.jar拷贝到hadoop对应目录下
cd /usr/local/soft/hive-1.2.1/lib/
cp jline-2.12.jar /usr/local/soft/hadoop-2.7.6/share/hadoop/yarn/lib/

在这里插入图片描述

配置环境变量
vim /etc/profile

#追加以下内容
HIVE_HOME=/usr/local/soft/hive-1.2.1
export PATH=$PATH:$HIVE_HOME/bin

在这里插入图片描述

重新加载环境变量
source /etc/profile
启动hive
hive

在这里插入图片描述

修改mysql元数据库hive

目的:让其hive支持utf-8编码以支持中文

#1登录mysql
mysql -uroot -p123456
#2切换到hive数据库
use hive;
#3修改字段注释字符集
alter table COLUMNS_V2 modify column COMMENT varchar(256) character set utf8;
#4修改表注释字符集
alter table TABLE_PARAMS modify column PARAM_VALUE varchar(4000) character set utf8;
#5修改分区表参数,以支持分区键能够用中文表示
alter table PARTITION_PARAMS modify column PARAM_VALUE varchar(4000) character set utf8;
alter table PARTITION_KEYS modify column PKEY_COMMENT varchar(4000) character set utf8;
#6修改索引注解(可选)
alter table INDEX_PARAMS modify column PARAM_VALUE varchar(4000) character set utf8;
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值