hive的beeline使用

Hive Beeline 客户端使用指南
本文介绍如何使用Hive Beeline客户端连接Hive Server2,并演示了无Kerberos及Kerberos认证下的连接方式。此外,还提供了通过Beeline执行SQL语句和SQL文件的方法。

Hive CLI是一种重客户端,在新版本中已移除,推荐使用Hive beeline客户端,可以更好地实现安全控制,下面讲讲beeline的使用。

在hive1.1.0中使用Hive CLI会提示WARNING: Hive CLI is deprecated and migration to Beeline is recommended.

无kerberos的hive

beeline
!connect jdbc:hive2://centos:10000 username password

对于没有开启kerberos认证的集群,可以输入任意的username和password。也可以敲Enter键表示空。其中centos是我的hiveserver2的主机名,用户需要修改成自己的hiveserver2名。比如我使用了任意的用户名和密码jwldata,如下图所示,成功连接到了hiveserver2

可以使用非交互式连接hive,适用于程序脚本连接。

beeline -u 'jdbc:hive2://centos:10000'

带kerberos的hive

使用kerberos认证

开启了kerberos认证的hadoop集群,hive默认使用kerberos认证。
比如user1用户先进行kerberos认证。

kinit -kt /path/to/user1.keytab user1

然后使用非交互式连接hive,增加principal=hive/_HOST@CENTOS,其中CENTOS是我的Kerberos KDC名字,用户需要修改成自己的KDC名。

beeline -u 'jdbc:hive2://centos:10000/default;principal=hive/_HOST@CENTOS'

使用LDAP认证

如果Hive另外配置集成了LDAP认证,那么也可以使用LDAP的用户名和密码进行身份认证。

beeline
!connect jdbc:hive2://centos:10000

根据提示输入LDAP用户名和密码

或者直接在url连接串中传入LDAP用户和密码

beeline
!connect jdbc:hive2://centos:10000 <ldap-username> <ldap-password>

也可以使用非交互式连接hive,适用于程序脚本连接。

beeline -u 'jdbc:hive2://centos:10000/default <ldap-username> <ldap-password>'

更多例子

传入查询语句

在beeline中直接运行sql语句

beeline -u 'jdbc:hive2://centos:10000/bank;principal=hive/_HOST@CENTOS' --silent=true --outputformat=tsv2 --showHeader=false -e "show tables"

beeline -u 'jdbc:hive2://centos:10000/default;principal=hive/_HOST@CENTOS' --silent=true --outputformat=tsv2 --showHeader=false -e "select * from bank.account"

传入查询文件

对于SQL语句比较长的,可以考虑写在文本文件里,传入beeline中执行,更加方便。
比如我把一个sql语句写在sql.txt中。

select name, sum(cash) from bank.account group by name;

执行以下beeline语句,可以执行sql.txt文件中的SQL语句。

beeline -u 'jdbc:hive2://centos:10000/default;principal=hive/_HOST@CENTOS' --silent=true --outputformat=tsv2 --showHeader=false -f sql.txt

Hive有多种连接方式,其中一种是通过客户端beeline访问。以下是关于Hive Beeline连接的详细信息: ### 连接方式概述 Hive的连接方式有cli方式(在bin目录下执行hive,相当于执行hive --service cli)、通过客户端beeline访问以及通过web ui访问,这里着重介绍通过beeline客户端访问的方法 [^1]。 ### 连接配置示例 在主机上进行连接配置的示例如下: ```plaintext [root@hadoop001 apache-hive-3.1.2-bin]# beeline beeline> !connect jdbc:hive2://192.xxx.x.xxx:10000 Enter username for jdbc:hive2://192.xxx.x.xxx:10000: root Enter password for jdbc:hive2://192.xxx.x.xxx:10000: ****(填入 root, 密码可不输入直接回车) ``` 这里显示的是主机自己的地址 [^3]。 ### 远程连接测试示例 以下是一个远程连接测试的示例: ```plaintext lcc@localhost dubhe-node$ beeline Beeline version 2.2.0 by Apache Hive beeline> !connect jdbc:hive2://localhost:10000/default SLF4J: Class path contains multiple SLF4J bindings. SLF4J: Found binding in [jar:file:/Users/lcc/soft/hive/hive/lib/log4j-slf4j-impl-2.6.2.jar!/org/slf4j/impl/StaticLoggerBinder.class] SLF4J: Found binding in [jar:file:/Users/lcc/soft/hadoop/hadoop/share/hadoop/common/lib/slf4j-log4j12-1.7.10.jar!/org/slf4j/impl/StaticLoggerBinder.class] SLF4J: See http://www.slf4j.org/codes.html#multiple_bindings for an explanation. SLF4J: Actual binding is of type [org.apache.logging.slf4j.Log4jLoggerFactory] Connecting to jdbc:hive2://localhost:10000/default Enter username for jdbc:hive2://localhost:10000/default: Enter password for jdbc:hive2://localhost:10000/default: Connected to: Apache Hive (version 2.2.0) Driver: Hive JDBC (version 2.2.0) Transaction isolation: TRANSACTION_REPEATABLE_READ 0: jdbc:hive2://localhost:10000/default> ``` 在这个过程中,可能会出现SLF4J的绑定提示,可参考提示中的链接进行解释 [^4]。 ### 相关设置 在使用Beeline连接Hive前,还需要进行一些设置,例如在Core-site.xml中设置hadoop代理用户: ```xml <property> <name>hadoop.proxyuser.hadoop.hosts</name> <value>*</value> </property> <property> <name>hadoop.proxyuser.hadoop.groups</name> <value>*</value> </property> ``` 并且需要启动hiveserver2 [^5]。 ### 连接后设置Hive参数 通过Beeline连接后,可以设置Hive参数,通过相应的操作和代码示例能够更高效地使用Hive [^2]。
评论 1
成就一亿技术人!
拼手气红包6.0元
还能输入1000个字符
 
红包 添加红包
表情包 插入表情
 条评论被折叠 查看
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值