【Hadoop】提交任务时 java.net.ConnectException: 拒绝连接

最新推荐文章于 2025-04-03 19:55:41 发布

Tomcat不是Cat

最新推荐文章于 2025-04-03 19:55:41 发布

阅读量5.5w

点赞数 7

分类专栏： hadoop 文章标签： hadoop

本文链接：https://blog.youkuaiyun.com/huangpingcai/article/details/78344451

版权

hadoop 专栏收录该内容

1 篇文章

订阅专栏

情况描述

[2017/10/25 17:16:17] [WARN] org.apache.hadoop.ipc.Client$Connection.handleConnectionFailure(Client.java:913): Failed to connect to server: master/192.168.16.180:9000: try once and fail.
java.net.ConnectException: 拒绝连接
    at sun.nio.ch.SocketChannelImpl.checkConnect(Native Method)
    at sun.nio.ch.SocketChannelImpl.finishConnect(SocketChannelImpl.java:717)
    at org.apache.hadoop.net.SocketIOWithTimeout.connect(SocketIOWithTimeout.java:206)
    at org.apache.hadoop.net.NetUtils.connect(NetUtils.java:531)
    at org.apache.hadoop.net.NetUtils.connect(NetUtils.java:495)
    at org.apache.hadoop.ipc.Client$Connection.setupConnection(Client.java:681)
    at org.apache.hadoop.ipc.Client$Connection.setupIOstreams(Client.java:777)
    at org.apache.hadoop.ipc.Client$Connection.access$3500(Client.java:409)
    at org.apache.hadoop.ipc.Client.getConnection(Client.java:1542)
    at org.apache.hadoop.ipc.Client.call(Client.java:1373)

解决方案

首先可以用telnet测试每次修改后连接情况：

这里写图片描述

1.防火墙开放端口

我在集群中配置的端口是9000，防火墙是iptables，开放该端口：

iptables -A INPUT -p tcp NEW --dport 9000 -j ACCEPT

service iptables save 将操作保存到/etc/sysconfig/iptables ，若提示命令不存在，则先安装 yum install iptables-services 

service iptables restart

如果是firewall，操作同理：

# 默认空间
firewall-cmd --zone=public --add-port=80/tcp --permanent 

firewall-cmd --reload

2.查看启动日志

如果没有更爱默认设置，hadoop的启动日志位于$HADOOP_HOME/logs/，某次启动情况：

这里写图片描述

这是我直接将本地的hadoop包直接上传到虚拟机后集群的ID不一致，清除data目录后重新hadoop namenode -format即可。

这里写图片描述

这是没有对hdfs初始化，也是需要hadoop namenode -format。

3.配置项

所有节点配置时要指定本地的IP，不能填写localhost或127.0.0.1（大坑）：

这里写图片描述

最后

这里写图片描述

提交作业

这里写图片描述