hadoop 中datanode无法启动

最新推荐文章于 2024-08-17 22:31:50 发布

原创最新推荐文章于 2024-08-17 22:31:50 发布 · 841 阅读

0 ·

CC 4.0 BY-SA版权

linux 专栏收录该内容

3 篇文章

订阅专栏

本文介绍了一种简单粗暴的Hadoop配置方法，通过修改hdfs-site.xml文件中的dfs.datanode.data.dir路径，并删除datanode目录下的VERSION文件来重新格式化Hadoop集群。

配置hadoop的信息，友情链接（ubuntu可用，更新下hadoop的版本）：https://www.drweiwang.com/install-hadoop-2-2-0-debian/

刚学hadoop，找到了一种简单粗暴的方法，不知道有没有什么影响。

进入到hadoop的安装目录后：

$ cd etc/hadoop
$ ls
<!--显示如下
capacity-scheduler.xml      httpfs-env.sh            mapred-env.sh
configuration.xsl           httpfs-log4j.properties  mapred-queues.xml.template
container-executor.cfg      httpfs-signature.secret  mapred-site.xml
core-site.xml               httpfs-site.xml          slaves
hadoop-env.cmd              kms-acls.xml             ssl-client.xml.example
hadoop-env.sh               kms-env.sh               ssl-server.xml.example
hadoop-metrics2.properties  kms-log4j.properties     yarn-env.cmd
hadoop-metrics.properties   kms-site.xml             yarn-env.sh
hadoop-policy.xml           log4j.properties         yarn-site.xml
hdfs-site.xml               mapred-env.cmd

$ cat hdfs-site.xml
<!--显示如下

...

<configuration>
<property>
   <name>dfs.replication</name>
   <value>1</value>
 </property>
 <property>
   <name>dfs.namenode.name.dir</name>
   <value>file:/home/hadoopuser/mydata/hdfs/namenode</value>
 </property>
 <property>
   <name>dfs.datanode.data.dir</name>
   <value>file:/home/hadoopuser/mydata/hdfs/datanode</value>
 </property>

</configuration>

找到这个路径后
<name>dfs.datanode.data.dir</name>
   <value>file:/home/hadoopuser/mydata/hdfs/datanode</value>


$ cd /home/hadoopuser/mydata/hdfs/datanode/current/
$  rm VERSION

重新format一下即可。