MAC安装配置Hadoop3.*环境报错问题解决方案

本文主要介绍了两个常见的Hadoop错误及其解决方案。一是关于native-hadoop库加载失败的问题,提供了重新编译源码或直接替换lib/native的方法,并分享了预编译的包资源;二是http://localhost:50070无法访问的问题,分析了可能是由于VPN开启或namenode初始化端口失效导致,并给出了关闭VPN和修改hdfs-site.xml文件中端口号的解决办法。

摘要生成于 C知道 ,由 DeepSeek-R1 满血版支持, 前往体验 >

报错1:

WARN util.NativeCodeLoader: Unable to load native-hadoop library for your platform... using builtin-java classes where applicable

native-hadoop包问题

解决方案:

1、重新编译源码后将新的lib/native替换到集群中原来的lib/native
不想编译可以使用我编译好的包,地址:https://download.youkuaiyun.com/download/loujun2016/10798878

下载后替换到自己的hadoop目录下即可

2、修改hadoop-env.sh ,增加(替换成自己的路径)

export HADOOP_OPTS="-Djava.library.path=/usr/local/Cellar/hadoop/3.1.1/libexec/native"

 

报错2:

http://localhost:50070 无法访问

原因1:本机开着vpn导致无法访问,关掉即可

原因2:namenode初始化端口失效,修改配置文件设置默认端口 
1.hdfs-site.xml 添加如下:

<property>
  <name>dfs.http.address</name>
  <value>0.0.0.0:50070</value>
</property>

 

 



 

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值