Centos7MySql8安装以及hive3安装

本文详细介绍了在Centos7环境中安装MySQL8及Hive3的过程,包括MySQL的安装与配置、Hive的安装与关联Hadoop等步骤,并提供了BeelineCLI配置与Hive JDBC操作的实例。

摘要生成于 C知道 ,由 DeepSeek-R1 满血版支持, 前往体验 >

Centos7MySql8安装以及hive3安装


一、 安装环境

1.hadoop3.3
2.jdk1.8
3.hive 3.1.2
4.centos7

二、下载Mysql所需要的安装包

网址:https://dev.mysql.com/downloads/mysql/
  1. Select Operating System: 选择 Red Hat ,CentOS 是基于红帽的,Select OS Version: 选择 linux 7,选择RPM Bundle 点击 Download
    在这里插入图片描述
  2. 点击No thanks,just start my download
    在这里插入图片描述
    3.下载好后,打开xftp上传到虚拟机
    在这里插入图片描述

三、 安装mysql

1.通过 rpm -qa | grep mariadb 命令查看 mariadb 的安装包
在这里插入图片描述
2.通过 rpm -e mariadb-libs-5.5.56-2.el7.x86_64 --nodeps 命令装卸 mariadb
在这里插入图片描述
3.在/opt/module下创建mysql目录
在这里插入图片描述
4.将mysql压缩包解压到mysql下
在这里插入图片描述
5.进入到/opt/module/mysql目录下,通过rpm -ivh mysql-community-common-8.0.22-1.el7.x86_64.rpm --nodeps –force命令安装common
在这里插入图片描述
在这里插入图片描述
6.通过sudo rpm -ivh mysql-community-libs-8.0.22-1.el7.x86_64.rpm --nodeps –force安装libs
在这里插入图片描述
7.通过sudo rpm -ivh mysql-community-client-8.0.22-1.el7.x86_64.rpm --nodeps –force命令安装client
在这里插入图片描述
8.通过sudo rpm -ivh mysql-community-server-8.0.22-1.el7.x86_64.rpm --nodeps –force命令安装server
在这里插入图片描述
9.通过rpm -qa|grep mysql 命令查看mysql 的安装包
在这里插入图片描述

三、 初始化mysql数据库的初始化和相关配置

  1. 通过以下命令,完成对 mysql 数据库的初始化和相关配置
mysqld --initialize;
chown mysql:mysql /var/lib/mysql -R;
systemctl start mysqld.service;
systemctl  enable mysqld;

在这里插入图片描述
2.通过 cat /var/log/mysqld.log | grep password 命令查看数据库的密码
在这里插入图片描述
3.通过 mysql -uroot -p 敲回车键进入数据库登陆界面(使用上面查看到的密码)
在这里插入图片描述
4.通过 ALTER USER ‘root’@‘localhost’ IDENTIFIED WITH mysql_native_password BY ‘001231’; 命令来修改密码
在这里插入图片描述
5.通过exit,然后用新密码登录
6.通过以下命令,进行远程访问的授权
记住要使用自己的密码

create user 'root'@'%' identified with mysql_native_password by '001231';
grant all privileges on *.* to 'root'@'%' with grant option;
flush privileges;

7.通过 ALTER USER ‘root’@‘localhost’ IDENTIFIED BY ‘root’ PASSWORD EXPIRE NEVER; 命令修改加密规则,MySql8.0 版本 和 5.0 的加密规则不一样,而现在的可视化工具只支持旧的加密方式。
在这里插入图片描述
8.通过 flush privileges; 命令刷新修该后的权限
9.退出数据库
10.打开Navicat Premium(这个是远程连接数据库,可以不用)
在这里插入图片描述
11.按照图片步骤,进行连接数据库
在这里插入图片描述
12.这样就是连接成功
在这里插入图片描述

四、 hive安装

1.下载解压hive
在这里插入图片描述
改一下名字
在这里插入图片描述
2.配置环境变量
修改/etc/profile文件
在这里插入图片描述在这里插入图片描述
输入这个命令,查看版本,如果输出版本,则证明环境变量配置成功
在这里插入图片描述
3.关联hadoop
修改文件hive-env.sh.template名字为 hive-env.sh
在这里插入图片描述
然后添加自己的hadoop的路径
在这里插入图片描述

4.配置MySQL
创建名为hive_db的数据库,用于存放hive元数据信息。然后创建hive,密码自己设置,并赋予其全局外部访问权限。

create database hive_db;
create user hive identified by '001231';
grant all privileges on hive_db.* to hive@'%' with grant option;
flush privileges;

5.配置hive

  • 上传驱动包
    下载链接https://downloads.mysql.com/archives/c-j/
    解压后,找到里面的的jar包,上传到hive/lib目录下

在这里插入图片描述

  • 修改配置文件
    进入到/hive/conf将hive-default.xml.template 改为hive-site.xml
    在这里插入图片描述
    修改为一下内容:数据库名和地址要修改为自己的
<?xml version="1.0" encoding="UTF-8" standalone="no"?>
<?xml-stylesheet type="text/xsl" href="configuration.xsl"?>
<configuration>
	<property>
    <name>javax.jdo.option.ConnectionURL</name>
    <value>jdbc:mysql://localhost:3306/hive_db?serverTimezone=GMT</value>
</property>
<property>
    <name>javax.jdo.option.ConnectionDriverName</name>
    <value>com.mysql.cj.jdbc.Driver</value>
</property>
<property>
    <name>javax.jdo.option.ConnectionUserName</name>
    <value>hive</value>
</property>
<property>
    <name>javax.jdo.option.ConnectionPassword</name>
    <value>001231</value>
</property>
</configuration>

6.初始化元数据
输入命令进行初始化在这里插入图片描述
显示以下内容,则成功
在这里插入图片描述

7.启动命令行(到此本地模式安装成功)
输入hive命令在这里插入图片描述
输入show databases;显示以下内容,则成功
在这里插入图片描述
8.下面是远程模式
9.安装hive客户端
将centos01作为客户端,centos02作为服务端。
将centos01上的hive目录复制到centos02节点上
在这里插入图片描述
修改配置文件hive-site.xml文件,清除之前的配置属性,添加以下配置

<property>
    <name>hive.metastore.warehouse.dir</name>
    <value>/user/hive/warehouse</value>
</property>
<property>
    <name>hive.metastore.tool</name>
    <value>false</value>
</property>
<property>
    <name>hive.metastore.uris</name>
    <value>thrift://192.168.71.11:9083</value>
</property>

10.启动Metastore Server
在centos01上输入hive --service metastore &,启动Metastore Server

在这里插入图片描述
jps显示在这里插入图片描述
在cnetos01上执行hive命令启动命令行模式
jps后会显示有两个RunJar
在这里插入图片描述

11.访问Hive
在centos02节点上,进入hive安装目录执行bin/hive启动命令行模式,测试Hive远程访问
在这里插入图片描述
出现如图所示则成功

五、 配置Beeline CLI

  1. 修改用户权限
    在centos01上面修改hadoop配置文件core-site.xml,添加以下配置内容
    在这里插入图片描述
    设置完后将core-site.xml同步到其他节点
    在这里插入图片描述
    在这里插入图片描述
    修改完后,启动hadoop

  2. 启动hiveServer2
    在centos01节点执行以下命令,启动HiveServer2服务
    在这里插入图片描述

  3. 启动Beeline CLI
    在centos02上进入hive安装目录中执行 bin/beeline
    在这里插入图片描述

  4. 连接HiveServer2服务
    输入命令进行连接
    在这里插入图片描述
    这里测试是否成功
    在这里插入图片描述
    显示如图,则表示成功

六、 Hive JDBC操作

  1. 新建maven工程
    点击idea中File->new->project
    在这里插入图片描述
    点击下一步,设置工程名和包名
    在这里插入图片描述
    点击下一步,设置仓库地址,点击Finish在这里插入图片描述
    添加maven依赖
    在这里插入图片描述

2.编写JDBC程序

import java.sql.Connection;
import java.sql.DriverManager;
import java.sql.ResultSet;
import java.sql.Statement;

public class HiveJDBCTest {
    public static void main(String[] args) throws Exception {
        // 驱动名称
        String driver = "org.apache.hive.jdbc.HiveDriver";
        // 连接地址,默认使用端口10000,使用默认数据库
        String url = "jdbc:hive2://192.168.71.11:10000/db_hive";
        // 用户名(hadoop集群的登录用户)
        String username = "hduser";
        //密码
        String password = "";
        //1.加载JDBC驱动
        Class.forName(driver);
        //2.获取连接
        Connection conn = DriverManager.getConnection(url,username,password);
        Statement stmt = conn.createStatement();
        //3.执行查询
        String sql = "select * from student";
        ResultSet res = stmt.executeQuery(sql);
        //4.处理结果
        while(res.next()){
            System.out.println(res.getInt(1)+"\t"+res.getString(2));
        }
        //5.关闭连接
        res.close();
        stmt.close();
        conn.close();
    }
}

运行结果:

在这里插入图片描述

感觉有用的,点个赞吧,嘿嘿

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值