搭建Hadoop分布式集群50070页面只显示一个节点

解决Hadoop集群配置问题：SecondaryNameNode、DataNode显示异常及端口连接故障

最新推荐文章于 2024-03-21 20:21:24 发布

原创

最新推荐文章于 2024-03-21 20:21:24 发布 · 3.9k 阅读

15 ·

CC 4.0 BY-SA版权

文章标签：

#大数据

在学习大数据过程中，搭建三台虚拟机的Hadoop分布式集群遇到问题，包括SecondaryNameNode节点未启动、50070页面只显示一个DataNode节点以及8088和50090页面无法连接。通过查看日志发现SecondaryNameNode启动失败是由于hosts文件未正确配置。解决方法是更新hosts文件并重启节点。DataNode显示异常是由于多次格式化导致，通过删除数据、重新格式化和启动节点解决。最后，8088和50090页面连接问题是因为防火墙未关闭，关闭对应节点的防火墙后问题解决。

最近跟着视频在学大数据，我的集群是用了三台虚拟机搭建，分布情况是这样的：
在这里插入图片描述

问题集合：

1.SecondaryNameNode节点起不来

2.50070页面只显示一个DataNode节点

3.8088和50090页面无法连接

解决过程：

1.SecondaryNameNode节点起不来
我按照步骤在每个节点下都进行了启动，jps命令后唯独SecondaryNameNode节点找不到，后来是在slave1的日志中查看了报错信息
(查看日志是一个非常有用的手段，也是在查错中学到的)
日志中报错在这里插入图片描述
这里显示没有识别master，后来才想起我忘记在slave0和slave1的hosts文件中修改hosts文件了，三台虚拟机的hosts文件中都要进行操作