hadoop-2.2.0+hive-0.11.0下整合RHive问题记录

最新推荐文章于 2022-08-09 17:48:05 发布

原创

最新推荐文章于 2022-08-09 17:48:05 发布 · 3.8k 阅读

0 ·

CC 4.0 BY-SA版权

文章标签：

#RHive

本文记录了在Hadoop 2.2.0和Hive 0.11.0环境下整合RHive时遇到的错误及解决方案，包括NoClassDefFoundError、IOException和VerifyError等。通过调整CLASSPATH、升级protobuf版本以及修正hostname与hosts文件配置，最终成功连接Hive和HDFS。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

> rhive.connect(host="127.0.0.1")

14/03/02 21:14:34 INFO Configuration.deprecation: fs.default.name is deprecated. Instead, use fs.defaultFS
14/03/02 21:14:34 INFO Configuration.deprecation: fs.default.name is deprecated. Instead, use fs.defaultFS
错误于.jcall("RJavaTools", "Ljava/lang/Object;", "invokeMethod", cl, :
java.lang.NoClassDefFoundError: org/apache/hadoop/util/PlatformName

解决方法：将$HADOOP_HOME/share/hadoop/common/lib/hadoop-auth-2.2.0.jar添加到CLASSPATH中

> rhive.connect()
14/03/02 21:54:08 INFO Configuration.deprecation: fs.default.name is deprecated. Instead, use fs.defaultFS
14/03/02 21:54:08 INFO Configuration.deprecation: fs.default.name is deprecated. Instead, use fs.defaultFS
14/03/02 21:54:09 WARN util.NativeCodeLoader: Unable to load native-hadoo