hive源数据服务启动错误

在配置Hive源数据服务时,为避免集成Hue,删除了特定配置。然而,启动metastore服务时遇到9083端口已被占用的问题,通过`netstat`命令发现该端口上有一个LISTEN状态的进程。为解决此问题,使用`kill`命令结束了占用该端口的进程。

摘要生成于 C知道 ,由 DeepSeek-R1 满血版支持, 前往体验 >

 

一.配置hive 源数据服务

 

1. 在 hive-site 配置文件里将下面的配置文件删除(这个配置时用来集成hue的,删除就不集成了

           <property>

   <name>hive.metastore.uris</name>

  <value>thrift://hadoop-senior01.ibeifeng.com:9083</value>

      <description>ThriftURI for the remote metastore. Used by metastore client to connect to remotemetastore.</description>

    </property>

2.启动: hive  --service metastore&

 

二.启动  metastore 时报错

org.apache.thrift.transport.TTransportException: Could not create ServerSocket on address 0.0.0.0/0.0.0.0:9083.

        at org.apache.thrift.transport.TServerSocket.<init>(TServerSocket.java:93)

        at org.apache.thrift.transport.TServerSocket.<init>(TServerSocket.java:75)

        at org.apache.hadoop.hive.metastore.TServerSocketKeepAlive.<init>(TServerSocketKeepAlive.java:34)

        at org.apache.hadoop.hive.metastore.HiveMetaStore.startMetaStore(HiveMetaStore.java:5192)

        at org.apache.hadoop.hive.metastore.HiveMetaStore.main(HiveMetaStore.java:5134)

        at sun.reflect.NativeMethodAccessorImpl.invoke0(Native Method)

        at sun.reflect.NativeMethodAccessorImpl.invoke(NativeMethodAccessorImpl.java:57)

        at sun.reflect.DelegatingMethodAccessorImpl.invoke(DelegatingMethodAccessorImpl.java:43)

        at java.lang.reflect.Method.invoke(Method.java:606)

        at org.apache.hadoop.util.RunJar.main(RunJar.java:212)

Exception in thread "main" org.apache.thrift.transport.TTransportException: Could not create ServerSocket on address 0.0.0.0/0.0.0.0:9083.

        at org.apache.thrift.transport.TServerSocket.<init>(TServerSocket.java:93)

        at org.apache.thrift.transport.TServerSocket.<init>(TServerSocket.java:75)

        at org.apache.hadoop.hive.metastore.TServerSocketKeepAlive.<init>(TServerSocketKeepAlive.java:34)

        at org.apache.hadoop.hive.metastore.HiveMetaStore.startMetaStore(HiveMetaStore.java:5192)

        at org.apache.hadoop.hive.metastore.HiveMetaStore.main(HiveMetaStore.java:5134)

        at sun.reflect.NativeMethodAccessorImpl.invoke0(Native Method)

        at sun.reflect.NativeMethodAccessorImpl.invoke(NativeMethodAccessorImpl.java:57)

        at sun.reflect.DelegatingMethodAccessorImpl.invoke(DelegatingMethodAccessorImpl.java:43)

        at java.lang.reflect.Method.invoke(Meth

9083 端口发现被占用

[root@h1 bin]# netstat-apn|grep 9083

tcp       0      00.0.0.0:9083               0.0.0.0:*                  LISTEN     26235/java         

tcp      48      0192.168.170.69:9083        192.168.170.69:44742        CLOSE_WAIT -                  

[root@h1 bin]# netstat-apn|grep 9088

[root@h1 bin]#

杀死进程: kill -9  26235

 

### Hive元数据初始化成功但服务启动失败的原因分析 当Hive元数据初始化成功,但在尝试启动Hive服务时仍然失败,通常可能是由于以下几个原因引起的: #### 1. **配置文件问题** 如果`hive-site.xml`中的某些参数配置不正确或者缺失,可能会导致Hive无法正常连接到Metastore数据库。例如: - `javax.jdo.option.ConnectionURL`: 如果此参数指向了一个不存在或不可访问的数据库实例,则会引发异常。 - `javax.jdo.option.ConnectionDriverName`: 配置错误可能导致JDBC驱动加载失败。 确保这些关键参数已正确定义并匹配实际环境[^3]。 ```xml <property> <name>javax.jdo.option.ConnectionURL</name> <value>jdbc:mysql://localhost:3306/hive_metastore?createDatabaseIfNotExist=true&useSSL=false</value> </property> <property> <name>javax.jdo.option.ConnectionDriverName</name> <value>com.mysql.cj.jdbc.Driver</value> </property> ``` #### 2. **依赖冲突** 在某些情况下,Hive运行环境中可能存在多个版本的相同库(如Guava),这会导致类加载器出现问题。这种问题可以通过检查Hive的`lib`目录来确认是否有重复的jar包,并移除不必要的旧版jar包[^2]。 #### 3. **权限不足** 即使元数据初始化完成,但如果当前用户缺乏足够的权限去操作目标MySQL表结构或其他资源,也会阻止Hive服务完全启动。验证用于连接MySQL的服务账户是否具有所需的全部权限是非常重要的。 #### 4. **日志排查** 查看详细的错误日志可以帮助定位具体问题所在位置。可以增加调试级别以便获取更多上下文信息。启用更详尽的日志记录可通过调整log4j.properties实现[^4]。 ```bash # 启动Hive CLI的同时开启详细模式 hive --verbose ``` #### 5. **其他潜在因素** 有时硬件层面的因素也可能影响到软件的表现形式,比如磁盘空间耗尽、网络延迟过高都会间接造成应用层面上的功能障碍。 --- ### 解决方案建议 针对以上提到的各种可能性提供如下应对措施: - 审核所有的必要配置项是否存在以及其值设定得当; - 清理掉多余的第三方库副本以消除任何可能存在的兼容性隐患; - 授予指定账号充分的操作许可权限从而保障整个流程无障碍推进; - 细致解读系统反馈出来的提示消息进而采取针对性修正动作; 最后一步就是反复测试直至一切恢复正常运作状态为止。 ---
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值