Hadoop 格式化HDFS报错java.net.UnknownHostException: centos64

最新推荐文章于 2023-08-21 12:19:15 发布

转载最新推荐文章于 2023-08-21 12:19:15 发布 · 684 阅读

文章标签：

#hadoop #格式化出错 #找不到主机名

Hadoop 专栏收录该内容

6 篇文章

订阅专栏

博客主要讲述Hadoop格式化HDFS时的问题。执行hadoop namenode -format命令出现未知主机名，执行/bin/start-all.sh不成功。原因是hostname获取的主机名在/etc/hosts文件中无映射。解决办法是在/etc/hosts中修改让主机名有对应IP，或修改/etc/sysconfig/network中的hostname为localhost并重启网络。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

异常描述

在对HDFS格式化，执行hadoop namenode -format命令时，出现未知的主机名的问题，异常信息如下所示：

 [shirdrn@localhost bin]$ hadoop namenode -format
11/06/22 07:33:31 INFO namenode.NameNode: STARTUP_MSG: 
/************************************************************
STARTUP_MSG: Starting NameNode
STARTUP_MSG:   <span style="color: #ff0000;">host = java.net.UnknownHostException: centos64:centos64
</span>STARTUP_MSG:   args = [-format]
STARTUP_MSG:   version = 0.20.0
STARTUP_MSG:   build = https://svn.apache.org/repos/asf/hadoop/core/branches/branch-0.20 -r 763504; compiled by 'ndaley' on Thu Apr  9 05:18:40 UTC 2009
************************************************************/
Re-format filesystem in /tmp/hadoop/hadoop-shirdrn/dfs/name ? (Y or N) Y
11/06/22 07:33:36 INFO namenode.FSNamesystem: fsOwner=shirdrn,shirdrn
11/06/22 07:33:36 INFO namenode.FSNamesystem: supergroup=supergroup
11/06/22 07:33:36 INFO namenode.FSNamesystem: isPermissionEnabled=true
11/06/22 07:33:36 INFO metrics.MetricsUtil: Unable to obtain hostName
java.net.UnknownHostException: <span style="color: #ff0000;">localhost.localdomain: localhost.localdomain
</span>        at java.net.InetAddress.getLocalHost(InetAddress.java:1353)
        at org.apache.hadoop.metrics.MetricsUtil.getHostName(MetricsUtil.java:91)
        at org.apache.hadoop.metrics.MetricsUtil.createRecord(MetricsUtil.java:80)
        at org.apache.hadoop.hdfs.server.namenode.FSDirectory.initialize(FSDirectory.java:73)
        at org.apache.hadoop.hdfs.server.namenode.FSDirectory.<init>(FSDirectory.java:68)
        at org.apache.hadoop.hdfs.server.namenode.FSNamesystem.<init>(FSNamesystem.java:370)
        at org.apache.hadoop.hdfs.server.namenode.NameNode.format(NameNode.java:853)
        at org.apache.hadoop.hdfs.server.namenode.NameNode.createNameNode(NameNode.java:947)
        at org.apache.hadoop.hdfs.server.namenode.NameNode.main(NameNode.java:964)
11/06/22 07:33:36 INFO common.Storage: Image file of size 97 saved in 0 seconds.
11/06/22 07:33:36 INFO common.Storage: Storage directory /tmp/hadoop/hadoop-shirdrn/dfs/name has been successfully formatted.
11/06/22 07:33:36 INFO namenode.NameNode: SHUTDOWN_MSG: 
/************************************************************
SHUTDOWN_MSG: Shutting down NameNode at java.net.UnknownHostException: localhost.localdomain: localhost.localdomain
************************************************************/

再执行 /bin/start-all.sh 就不成功。

通过执行hostname命令可以看到（由自己情况决定）：

[shirdrn@localhost bin]# hostname
centos64&nbsp;

也就是说，Hadoop在格式化HDFS的时候，通过hostname命令获取到的主机名是centos64，然后在/etc/hosts文件中进行映射的时候，没有找到，看下我的/etc/hosts内容：

[root@localhost bin]# cat /etc/hosts
# Do not remove the following line, or various programs
# that require network functionality will fail.
127.0.0.1                   localhost       localhost
192.168.18.130           localhost       localhost

在：查看一下/etc/sysconfig/network文件：保存的是hostname 也就是主机名。

在 /etc/hosts 中修改：

127.0.0.1                   localhost       centos64
192.168.18.130           localhost      centos64

让主机名centos64 在 hosts中能有一个IP与之相映射对应。

2. 或修改 /etc/sysconfig/network 中的 hostname 为 localhost（要保证映射名称一致）

再:[root@localhost bin]# /etc/rc.d/init.d/network restart

以上修改完后，再执行格式化HDFS命令，以及启动HDFS集群就正常了。

转自：

https://lihongchao87.iteye.com/blog/1998347

表示感谢！！