【已解决】Hadoop集群中hive启动终止（hiveserver2&连接不上jdbc:hive2://localhost:10000 拒绝访问）

最新推荐文章于 2024-05-13 16:33:51 发布

原创

最新推荐文章于 2024-05-13 16:33:51 发布 · 2.6k 阅读

4 ·

CC 4.0 BY-SA版权

文章标签：

#mysql #数据库 #hadoop #java

在启动Hadoop集群后，尝试运行Hive时遇到卡住的问题，且使用hiveserver2 & 或者通过Beeline连接jdbc:hive2://localhost:10000时遭到拒绝访问。为解决此问题，需要检查并更新core-site.xml配置，添加相应的权限设置。

启动Hadoop后，输入hive
卡在以下：

Logging initialized using configuration in jar:file:/home/czy/modules/hive-1.2/lib/hive-common-1.2.0.jar!/hive-log4j.properties

或输入hiveserver2 &
beeline -u jdbc:hive2://master:10000 -n xxx

Error: Could not open client transport with JDBC Uri: jdbc:hive2://114.215.xxx.xxx:10000/default: java.net.ConnectException: Connection refused 拒绝访问 (state=08S01,code=0)

在core-site.xml中添加以下权限

<property>
    <name>hadoop.proxyuser.root.hosts

最低0.47元/天解锁文章

确定要放弃本次机会？

福利倒计时

: :

立减 ¥

普通VIP年卡可用

立即使用

ZHTTTCZY

关注关注

0
点赞
踩
4

收藏

觉得还不错? 一键收藏
0
评论
分享

复制链接

分享到 QQ

分享到新浪微博

扫一扫
举报

举报

专栏目录

beeline连接数据库报错Could not open client transport with JDBC Uri: jdbc:hive2://localhost:10000/cr: java.n

Joy

08-19

1万+

beeline&gt; !connect jdbc:hive2://localhost:10000/cr Connecting to jdbc:hive2://localhost:10000/cr Enter username for jdbc:hive2://localhost:10000/cr: Enter password for jdbc:hive2://localhost:10000/...

HiveServer2 常见异常和处理方法

houzhizhen的专栏

11-14

2397

HiveServer2 常见的3种异常和处理方案

参与评论您还未登录，请先登录后发表或查看评论

jdbc操作hive出现连接拒绝

weixin_30670925的博客

10-31

1590

1出现的问题： jdbc在操作hive时，出现了拒绝连接 2出现问题的原因：这是因为没有在服务端开启HiveServer2服务 3解决方法：到hive的bin目录下输入 ./hive --service hiveserver2 开启服务，这样就可以连接成功...

Hive Beeline连接报错：Could not open client transport with JDBC Uri: jdbc:hive2://hcmaster:10000/default

01-20

问题解决方案在hadoop的配置文件core-site.xml增加如下配置： hadoop.proxyuser.hc.hosts * hadoop.proxyuser.hc.groups * 其中“hc”是连接beeline的用户。启动测试重启hdfs：先stop-all.sh，再start-all.sh，否则不会生效。启动hiverserver2 查看是否启动：netstat -anp | grep 10000 3. 连接hiveserver2 作者：梁云亮

Error: Could not open client transport with JDBC Uri: jdbc:hive2://localhost:10000: java.net.Connect...

weixin_30435261的博客

09-05

3336

一：启动hiveserver2服务二：启动beeline 三：连接hiveserver2（下面的1000000端口号适当改小写因为其超出最大端口号的范围建议改为10000）如果启动不成功实现我们先检查以下两个文件配置是否正确 1）hadoop文件夹下面的core-site.xml中的内容 <propert...

Beeline连接报错：Could not open client transport with JDBC Uri: jdbc:hive2://localhost:10000/default

热门推荐

u011495642的博客

11-20

6万+

java.sql.SQLException: Could not open client transport with JDBC Uri: jdbc:hive2://localhost:10000/default: java.net.ConnectException: 拒绝连接解决方案：通过sudo netstat -anp|grep 10000 查看谁占用了10000端口，也就是h...

hive中 beeline连接时报错

qq_37668945的博客

11-01

3094

错误1. Error: Could not open client transport with JDBC Uri: jdbc:hive2://192.168.136.128:10000/mydb/: Failed to open new session: java.lang.RuntimeException: org.apache.hadoop.ipc.RemoteException(org....

记一次 Hadoop 3.3.0 集群 Hive 3.1.2 启动 hiveserver2 连接 jdbc:hive2://localhost:10000

一花一世界

01-07

955

[root@master ~]# vim /usr/bigdata/hadoop-3.3.0/etc/hadoop/core-site.xml <property> <name>hadoop.proxyuser.root.hosts</name> <value>*</value> </property> <propert

Apache hive 3.1.2从单机到高可用部署 HiveServer2高可用 Metastore高可用 hive on spark hiveserver2 web UI 高可用集群启动脚本

weixin_52918377的博客

05-21

2678

hive部署下载apache hive 3.1.2 http://archive.apache.org/dist/hive/ 注：先看hive编译文档，使用编译好的安装包进行部署官方的hive3.1.4和sprk3.0.0不兼容，需要重新编译。后面配置hive on spark 可以使用spark2.3.0。而spark2.3.0对应的hadoop版本是2.x。重新编译，参考本人写的另一篇文章 hive3.1.4源码编译兼容spark3.0.0 hive on spark 升级guava版本兼容

VMware 虚拟机安装 Hadoop/Hive 集群详细教程 (Macbook M1/M2) (第二部分)

05-13

1415

Hive 是一个基于 Hadoop 的数据仓库框架。 mysql 作为 hive 元数据管理

Error: Could not open client transport with JDBC Uri: jdbc:hive2://localhost

半壁江山009的博客

09-03

6829

解决方法：这个问题还是数据库的问题，因为hive的元数据需要保存在自己配的mysql中或者他们数据库中出现这个问题很大程度就是数据库出问题和hadoop没启动所以： 1.查看自己的mysql（我存在mysql中） mysql -uroot -p enter password: 如果能正常登入 mysql&gt; 说明mysql没问题；不能登入则先解决数据库问题然后重启数...

CentOs7启动hive报错Could not open client transport with JDBC Uri: jdbc

m0_70991304的博客

12-27

1016

你也像上图一样报错了吗？

java.sql 拒绝连接_hive jdbc 拒绝连接问题

weixin_31036949的博客

02-26

673

本帖最后由 willgone 于 2017-06-21 10:56 编辑平台配置在附件中。private static String driverName1 = "org.apache.hive.jdbc.HiveDriver";Class.forName(driverName1);String url="jdbc:hive2://192.168.160.241:21076/default";Co...

beeline报错：Error: Could not open client transport with JDBC Uri: jdbc:hive2://hadoop102:10000

weixin_52619195的博客

06-28

1634

解决beeline无法启动的问题

详解：hive启动hiveserver2连JDBC报错：Could not open client transport with JDBC Uri 解决方案

qq_43688472的博客

08-13

5781

hive启动hiveserver2连JDBC报错：Could not open client transport with JDBC Uri 解决方案 [hadoop@hadoop001 bin]$ ./beeline -u jdbc:hive2://hadoop001:10000/default -n hadoop ls: cannot access /home/hadoop/app/spar...

hive启动时 java.net.ConnectException:拒绝连接

hongchenshijie的博客

11-19

2万+

hive启动时 java.net.ConnectException:拒绝连接

[ 08S01] Could not open client transport with JDBC Uri: jdbc:hive2://localhost:10000: Invalid statu

stybill的博客

03-18

4万+

解决方法：启动hiveserver2服务 /bin/hiveserver2

启动hiveserver2连接不上jdbc:hive2://localhost:10000

记录

04-09

1万+

启动hiveserver2连接不上localhost:10000 进入hive的bin目录 $ cd /Users/zheng/hive/hive-3.1.2/bin #启动hivever2 $ hiveserver2 #显示如下表示已经成功打开 2020-04-09 22:34:21: Starting HiveServer2 SLF4J: Class path contains mult...

Could not open client transport with JDBC Uri: jdbc:hive2://10.216.8.114:10000/stg: Could not establish connection to jdbc:hive2://10.216.8.114:10000/stg: Required field 'client_protocol'

最新发布

06-17

<think>我们正在解决JDBC连接Hive时出现的错误：Requiredfield'client_protocol'ismissing。根据经验，这个错误通常发生在客户端和服务器之间的协议不匹配，特别是在使用HiveServer2时。可能的原因包括：1.客户端驱动版本与Hive服务器版本不兼容。2.连接URL格式不正确。3.HiveServer2服务未正确启动或配置问题。参考引用中并没有直接关于HiveJDBC连接的信息，但我们可以根据Hadoop生态的常见配置和问题排查思路来解决。解决步骤：1.确认HiveServer2服务正在运行：在Hive服务器上，检查HiveServer2进程是否运行。可以使用以下命令：```bashpsaux|grephive```或者查看日志（通常位于/var/log/hive/目录）确认是否有错误。2.检查连接URL格式：正确的HiveServer2JDBCURL格式通常为：```jdbc:hive2://<host>:<port>/<database>;transportMode=http;httpPath=<http_endpoint>```或者使用二进制模式（默认）：```jdbc:hive2://<host>:<port>/<database>```注意：端口默认为10000，如果使用http传输模式，端口通常为10001，并且需要指定httpPath（如cliservice）。例如：```jdbc:hive2://localhost:10000/default```或者使用ZooKeeper服务发现的URL（如果有HA）：```jdbc:hive2://<zk_quorum>/<database>;serviceDiscoveryMode=zooKeeper;zooKeeperNamespace=hiveserver2```3.检查客户端驱动版本：确保使用的HiveJDBC驱动（如hive-jdbc.jar）版本与Hive服务器版本一致。如果版本不一致，可能会出现协议不匹配。可以尝试下载与Hive服务器版本匹配的驱动。4.检查依赖库：HiveJDBC驱动需要一些依赖库，如httpclient、httpcore等。确保这些库在类路径中，并且版本兼容。5.检查网络连接：确保客户端可以访问HiveServer2的端口（如10000或10001）。可以使用telnet检查端口连通性：```bashtelnet<host><port>```6.查看HiveServer2日志：在Hive服务器上，查看HiveServer2的日志（通常位于/var/log/hive/hiveserver2.log）以获取更多错误信息。7.配置HiveServer2：在hive-site.xml中，确保以下配置正确：```xml<property><name>hive.server2.thrift.port</name><value>10000</value></property><property><name>hive.server2.thrift.bind.host</name><value>0.0.0.0</value></property><property><name>hive.server2.transport.mode</name><value>binary</value></property><property><name>hive.server2.thrift.http.port</name><value>10001</value></property><property><name>hive.server2.thrift.http.path</name><value>cliservice</value></property>```8.重启HiveServer2服务：修改配置后，重启HiveServer2服务使配置生效。9.使用beeline测试：在服务器上使用beeline客户端连接，验证服务是否正常：```bashbeeline-ujdbc:hive2://localhost:10000```如果beeline可以连接，则问题可能出在客户端配置或驱动上。10.检查客户端代码：在Java代码中，确保使用正确的驱动类：```javaClass.forName("org.apache.hive.jdbc.HiveDriver");```如果以上步骤仍不能解决问题，请提供更多信息，例如Hive版本、客户端环境、完整的异常堆栈等。注意：在引用[2]中提到了HBase的配置，但这里我们解决的是Hive的问题，因此不直接相关。但是，如果Hive运行在HBase之上，也需要确保HBase配置正确（例如ZooKeeper的配置）。不过，此错误更直接与HiveServer2相关。相关问题：1.如何升级HiveJDBC驱动以避免协议不匹配？2.HiveServer2支持哪些传输模式？如何配置？3.如何为HiveServer2配置SSL以提高安全性？4.如何通过ZooKeeper实现HiveServer2的高可用连接？5.如何调试HiveJDBC连接问题？</think>### JDBC连接Hive时"client_protocol缺失"错误解决方案该错误通常因**客户端与HiveServer2协议不匹配**引起，以下是系统化的解决步骤： #### 1. 检查Hive版本兼容性 - **核心问题**：老版本JDBC驱动（如Hive 1.x）无法自动处理Hive 2.x/3.x的协议协商 - **解决方案**： ```java // 在JDBC URL中显式声明协议版本 String url = "jdbc:hive2://host:10000/default; transportMode=http; httpPath=cliservice; protocolVersion=3" // 根据Hive版本设置 ``` - Hive 1.x → `protocolVersion=1` - Hive 2.x → `protocolVersion=2` - Hive 3.x → `protocolVersion=3` #### 2. 验证驱动版本 | Hive版本 | 推荐驱动 | Maven依赖 | |----------|------------------------|-------------------------------------| | 3.x | hive-jdbc-3.1.x.jar | `org.apache.hive:hive-jdbc:3.1.3` | | 2.x | hive-jdbc-2.3.x.jar | `org.apache.hive:hive-jdbc:2.3.9` | | 1.x | hive-jdbc-1.2.x.jar | `org.apache.hive:hive-jdbc:1.2.3` | ```xml  <dependency> <groupId>org.apache.hive</groupId> <artifactId>hive-jdbc</artifactId> <version>3.1.3</version> </dependency> ``` #### 3. 确认HiveServer2状态 ```bash # 检查HiveServer2进程 ps aux | grep hive-server2 # 查看日志（关键错误信息） tail -f /var/log/hive/hiveserver2.log ``` - 确保日志中无`ERROR thrift.ThriftCLIService: Error opening session`类错误 #### 4. 配置ZooKeeper（HA环境） ```xml  <property> <name>hive.server2.support.dynamic.service.discovery</name> <value>true</value> </property> <property> <name>hive.server2.zookeeper.namespace</name> <value>hiveserver2</value> </property> ``` - JDBC URL需包含ZK参数： ``` jdbc:hive2://zk1:2181,zk2:2181/;serviceDiscoveryMode=zooKeeper;zooKeeperNamespace=hiveserver2 ``` #### 5. 网络诊断工具 ```bash # 测试端口连通性 telnet hive-server-host 10000 # 使用beeline验证连接 beeline -u "jdbc:hive2://host:10000" ``` #### 6. 依赖冲突处理检查并排除冲突库： ```bash mvn dependency:tree | grep -E '(httpclient|httpcore|log4j)' ``` - 常见冲突库：`httpclient`, `httpcore`, `log4j-over-slf4j` --- ### 相关问题 1. 如何为不同Hive版本选择合适的JDBC驱动？ 2. HiveServer2的`protocolVersion`参数有哪些可选值？如何确定集群的协议版本？ 3. 在Kerberos认证环境下如何解决`client_protocol`错误？ 4. 如何通过Wireshark抓包分析Hive JDBC协议协商过程？ 5. 使用Hive JDBC时常见的依赖冲突有哪些？如何解决？