HDFS 本地编程报错java.net.ConnectException: Call From LAPTOP-LJF22VB3/192.168.56.1 to 192.168

通过 Hadoop 本机编程中关于虚拟机和本地主机通信的知识点

起因

本地主机编写相应的代码后运行发现报错,java.net.ConnectException: Call From LAPTOP-LJF22VB3/192.168.56.1 to 192.168,这是因为 Hadoop core-site.xml 其中的 fs.defaultFS 设置为 hdfs://localhost:9000,fs.defaultFS 配置错误,这是导致本机不能访问 Hadoop 9000 端口的根本原因

原因

上面将了根本原因,是因为 fs.defaultFS 配置为 localhost(127.0.0.1),这导致虚拟机上的 9000 端口只能由虚拟机访问,而本机在 IDEA 上调用时无法访问虚拟机的该端口,即使虚拟机的 ip 和本地主机是同一网段

此时本地主机是 192.168.43.1,而虚拟机的 ip 是 192.168.43.18,两台机子是同一网段

通过 netstat -tupnl 命令可以查看端口使用详情,下面有一张 Hadoop 运行时的网络图片

IMG

由上图可以看见 9000 端口只有虚拟机可以访问

另一种情况

虚拟机 IP 和本机处在同一网段但是仍然 Ping 不通

后面使用的时候又遇到连不上的情况,但是原因不同

在这里插入图片描述

注意看上图的 VMnet8,这是 VM 创建的虚拟网卡,Nat 模式下 VMnet8 的 IPV4 地址必须和虚拟机的 ip 在同一个网段(ifconfig 可以查看 ip),这里为了简便我把电脑 VMnet 8 的网段设置为静态的,默认就是 192.168.43.1,子网掩码是 255.255.255.0,这里虚拟机里的 IP 只要前三个数字一样就是同一网段(子网掩码和 IP 通过计算得出的,可以自己百度),具体设置如下(理论上来说 VM 里面也是可以配的)

在这里插入图片描述

注意,我这里 VMnet8 已经和虚拟机处在同一网段,都是 192.168.43,但是仍然无法通信,这里具体原因不知道是什么,但是解决方法还是有点,比较麻烦,在下面有讲

解决方法

其实解决方法已经很明显,只要让 9000 端口能让本地主机访问就行了,所以解决方法有两个

  1. core-site.xml,直接配置你当前的 IP,不放过需要注意的是你这个 IP 不能经常变,本地主机一旦换了个网络,IP 就会随机分配一个,所以这个方案,只适用与网络固定的时候,比如你的本地主机只用一条网线或者一台路由器
  2. /etc/hosts 修改,core-site.xml 设置一个你中意的名字,比如 hadoop01,然后在 hosts 文件中添加映射,也就是路由表中添加映射(涉及到一点点计网知识),这样 hado
`java.net.ConnectException: Connection refused` 错误通常表示客户端尝试连接到指定的主机和端口,但服务器没有响应。对于 `Call From LAPTOP - UDM5NOLC/10.111.125.69 to localhost:9000 failed on connection exception: java.net.ConnectException: Connection refused` 错误,以下是一些可能的解决方法: #### 检查服务是否正在运行 使用 `jps` 命令查看 Hadoop 进程,确认 NameNode 进程是否正在运行。若 NameNode 进程未正确运行,可停止服务后,重新格式化 NameNode,执行 `hadoop namenode -format` 命令,然后启动所有 Hadoop 服务,执行 `start-all.sh` 命令,使 NameNode 进程正常运行 [^3]。 #### 检查端口是否被占用 使用命令查看端口 `9000` 是否被其他程序占用。在 Linux 系统中,可使用 `netstat -tuln | grep 9000` 命令;在 Windows 系统中,可使用 `netstat -ano | findstr :9000` 命令。若端口被占用,可关闭占用该端口的程序,或者修改 Hadoop 配置文件中的端口号。 #### 检查主机名和 IP 配置 确保 `localhost` 能正确解析到 `127.0.0.1`。可查看系统的 `hosts` 文件(在 Windows 系统中,该文件位于 `C:\Windows\System32\drivers\etc\hosts`;在 Linux 系统中,位于 `/etc/hosts`),确认是否存在类似 `127.0.0.1 localhost` 的配置。 #### 检查防火墙设置 防火墙可能会阻止对端口 `9000` 的访问。可临时关闭防火墙进行测试,在 Linux 系统中,若使用 `iptables` 防火墙,可使用 `sudo service iptables stop` 命令关闭;在 Windows 系统中,可在防火墙设置中允许对端口 `9000` 的访问。 #### 检查 Hadoop 配置文件 检查 `core-site.xml` 文件,确保 `fs.defaultFS` 属性配置正确,例如: ```xml <configuration> <property> <name>fs.defaultFS</name> <value>hdfs://localhost:9000</value> </property> </configuration> ```
评论 4
成就一亿技术人!
拼手气红包6.0元
还能输入1000个字符
 
红包 添加红包
表情包 插入表情
 条评论被折叠 查看
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值