Hive 安装 python thrift 连接hiserver2

最新推荐文章于 2025-01-22 21:29:42 发布

hjh00

最新推荐文章于 2025-01-22 21:29:42 发布

阅读量2.3k

点赞数

分类专栏： hadoop

本文链接：https://blog.youkuaiyun.com/hjh00/article/details/64917226

版权

1. 软件列表

apache-hive-1.1.1-bin.tar.gz

mysql-5.6.16.tar.gz

mysql-connector-java-5.6-bin.jar

sasl-0.2.1.tar.gz

thrift-0.10.0.zip

pyhs2-0.6.0.tar.gz

2. 安装

1)规划

在现有的spark集群上安装，参加《Spark 安装》

192.168.200.171 安装mysql数据库、hive metastore server 和hive thrift server

192.168.200.170 hive client

2) mysql 安装

本想用rpm包直接安装的，但是太大了，下载要300多兆，就下载了源码编译安装。安装步骤如下。安装前先用yum remove 删除已安装的mysql。

#!/bin/bash
MYSQL_PASSWD="123456"
#-------------------------------------------
# Step 1
#-------------------------------------------
yum remove -y mysql mysql-server
yum install -y make gcc-c++ cmake bison-devel ncurses-devel
cd /src_mysql
tar xvf mysql-5.6.16.tar .gz
cd mysql-5.6.16
#------------------------------------------
# Step 2
#------------------------------------------
useradd -M -s /sbin/nologin mysql
cmake \
-DCMAKE_INSTALL_PREFIX=/usr/local/mysql \
-DMYSQL_UNIX_ADDR=/tmp/mysql.sock \
-DDEFAULT_CHARSET=utf8 \
-DDEFAULT_COLLATION=utf8_general_ci \
-DWITH_EXTRA_CHARSETS=all \
-DWITH_MYISAM_STORAGE_ENGINE=1\
-DWITH_INNOBASE_STORAGE_ENGINE=1\
-DWITH_MEMORY_STORAGE_ENGINE=1\
-DWITH_READLINE=1\
-DENABLED_LOCAL_INFILE=1\
-DMYSQL_DATADIR=/usr/local/mysql/data \
-DMYSQL-USER=mysql
make -j 4 && make install
#-------------------------------------
# Step 3
#-------------------------------------
cd && chown -R mysql:mysql /usr/local/mysql/
cp /usr/loc