Hadoop启动后jps没有Datenode的问题

最新推荐文章于 2025-04-09 16:11:33 发布
最新推荐文章于 2025-04-09 16:11:33 发布
阅读量8.6k 收藏 42
点赞数 11
文章标签： hadoop
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.youkuaiyun.com/xiehert/article/details/106593455
版权
问题描述

最近在学习搭建大数据集群的过程中碰到了一个问题，就是web界面起不来，在start-all.sh启动集群后，输入jps，发现缺少DataNode节点，上网查询了一下，可能是由于多次输入hadoop namenode -format格式化节点的缘故。

解决方法

找到hadoop下的core-site.xml
在这里插入图片描述
接着vi core-site.xml，根据画红框的那一条找到目录(每个人的设置都不一样，根据自己显示的去找就好)，然后删掉data目录(rm -rf data)，重新格式化一次。
在这里插入图片描述
最后输入jps显示了DataNode节点
![在这里插入图片描述](https://img-blog.csdnimg.cn/20200606213707558.png

xiehert
关注
启动Hadoop后 jps 没有出现DataNode进程 的解决方法
KingSuccesHou的博客
02-26 9648
一、出现问题的原因 在启动Hadoop之前，进行了多次的格式化，导致DataNode的ID发生了变化。 二、问题解决方法 我们可以让NameNode的clusterID与DataNode的clusterID一致，这样就可以解决这个问题了。 1.首先去到你的hadoop目录下 2.在进入到 hadoop-2.8.1/tmp目录下 3.在进入到dfs中 ls 4.在进入到目录name中ls 5.在进入到current中ls 6.使用命令（vi或vim）打开VERSI..
【问题解决】Hadoop集群启动后执行JPS没有DataNode或NameNode
午夜的行人
04-18 4万+
引言 最近在尝试在搭建Hadoop集群并测试集群是否搭建成功，但是第一次格式化NameNode并启动HDFS和YARN时发现一会儿有DataNode或者NameNode但是后面就没有了，二者没有同时存在，也尝试过停止进程再重新启动都没有解决掉该问题。 相关命令 集群第一次启动，格式化NameNode bin/hdfs namenode -format 启动HDFS sbin/start-dfs.sh 停止HDFS sbin/stop-dfs.sh 启动YARN sbin/start-yarn.sh
jps没有datanode进程
qq_43640212的博客
07-05 9351
jps没有datanode进程 问题描述： 最近配置Hadoop的时候出现了这么一个现象，启动之后，使用jps命令之后没有datanode进程 原因： 我在启动Hadoop之前和启动之后，曾经多次使用如下命令，针对NameNode进行格式化：hadoop namenode -format，这个问题，还不是直接多次格式化造成的，而是格式化之后，启动了Hadoop，然后将Hadoop关闭，重新格式化，再启动Hadoop造成的，这个时候就发现，DataNode线程在jps命令中消失了。 解决方法： 将格
Hadoop集群启动后执行JPS缺失DataNode
最新发布
gan_37的博客
04-09 163
可能是配置文件出错，需要检查core-site.xml 和 hdfs-site.xml这俩文件；可能是多次格式化NameNode，但是格式之前并没有停止之前的进程并删除相关数据。
Hadoop运行jps没有datanode节点【已解决】
@KUNKU的博客
09-05 5269
格式化NameNode后，如果DataNode的clusterID与新的NameNode的clusterID不匹配，DataNode将无法加入集群，导致HDFS无法正常提供服务。
hadoop的jps进程缺少datanode
m0_62363743的博客
11-02 2484
项目场景： 提示：这里简述项目相关背景： CentOS7 提前安装过Hadoop和hbase，第一次启动成功，第二次启动没有DataNode进程 原因分析： 在启动Hadoop时候进行多次格式化或者第一次启动的时候已经生成了DataNode 解决方案： 先关闭Hadoop和hbase //进入hadoop所在目录 sbin/stop-dfs.sh //进入hbase的所在目录 bin/stop-hbase.sh 找到DataNode的文件目录，删除data rm -...
hadoop启动后jps没有datanode
m0_56731259的博客
03-12 9208
Hadoop 启动后使用JPS查看没有DataNode 在伪分布式运行hadoop，发现DataNode没有启动： 一般由于多次格式化NameNode导致。在配置文件中保存的是第一次格式化时保存的namenode的ID，因此就会造成datanode与namenode之间的id不一致。 发现错误之后在hadoop所在位置中找到logs路径： 找到datanode日志文件打开。 找到错误的地方 复制namenode clusterID。 找到配置文件core-site.xml 找到data目录
jps没有datanode
weixin_44723678的博客
12-14 4737
启动start-all.sh后jps发现没有datanode进程。 查看日志 2018-02-27 13:54:29,161 WARN org.apache.hadoop.hdfs.server.common.Storage: java.io.IOException: Incompatible clusterIDs in /home/hadoop/app/tmp/dfs/data: namenode clusterID = CID-d92efb85-6a10-4a65-abe8-451f89eb845c;
hadoop搭建，jps没有datanode节点解决办法（实用简化版）
weixin_73692048的博客
05-27 2753
办法2.删除master节点 usr/local/hadoop/dfs目录下的data和name目录，然后创建新的data,name。（若仍报错，请检查usr/local/hadoop/etc/hadoop目录下配置文件，确保文件路径正确，都可以打开）本人情况：Hadoop分布式搭建，有主节点master，从节点slave01，ssh和相关映射已经弄好。问题：master节点正常启动，slave01节点datanode无法启动。办法1.在slave01中，手动启动datanode。
解决Hadoop完全分布式集群中从节点jps没有datanode节点问题
木子一个Lee的博客
10-23 1万+
也是进入这个目录，只不过namenode中的name文件在datanode是变为了data文件，即/tmp/dfs/data/current。当用start-dfs.sh和start-yarn.sh后，在slave节点(从节点)中用jps命令查看进程。有时候可能发现没有Datanode，即只有两项(第一项和最后一项)。clusterID替换掉datanode的clusterID就可以了。然后打开VERSION，把namenode的。打开，记录namedode下的。
hadoop启动jps缺少namenode和datenode
03-15
### Hadoop JPS NameNode 和 DataNode 缺失解决方案 当通过 `jps` 命令检查 Hadoop 集群状态时，发现 NameNode 和 DataNode 进程缺失的情况可能由多种原因引起。以下是针对该问题的分析和解决方法。 #### 可能的...
Hadoop | 解决启动Hadoop，jps后无namenode,datanode等进程
martinniee
01-11 1万+
问题描述 最近因为想修改一下主机名，用户名什么的 但是一开始没有注意到主机名和用户名对于Hadoop服务的影响 导致修改后，导致Hadoop启动，失败，即jps后，没有namenode,datanode，显然这两个文件对于hadoop是至关重要的，要不然无法获取数据 一开始没有考虑查看日志排错(因为对于异常处理方面不敏感:???? 因为机缘巧合，碰巧试了试，然后就行了 之所以出错，归根结底还是对于原理不熟 解决方案 首先要知道Linux下的主机名和用户名是什么，如何查看 命令行终端下 格式 : 用户名@主机
关于Hadoop中输入jps无法启动DataNode的解决方法
weixin_46663535的博客
10-12 1725
本文主要通过【修改权限】的方法解决此问题。
Hadoop运行jps后没有datanode进程
qq_20790447的博客
05-08 2566
jps没有datenode： 1、停止所有jps服务。 $cd /opt/module/hadoop-2.7.2/ $sbin/stop-all.sh 2、删除VERSION $cd /opt/module/hadoop-2.7.2/data/abc/temp/dfs/data/current [hadoop@hadoop102 current]$ ls BP-1881495200-192.168.80.102-1588832599461 VERSION [hadoop@hadoop102 curr
配置Hadoop实验环境 运行jps后未显示datanode或者namenode
dddfuc的博客
10-08 4510
配置Hadoop实验环境 运行jps后未显示datanode或者namenode 1.运行jps后未显示datenode 未显示datanode的原因一般都是多次格式化HDFS的原因：即多次执行 hdfs namenode -format 的结果。多次格式化会使得name和date下的clusterID不一样。因为每次格式化后name下的clusterID都会被改变，但是data下的clusterID只会在第一次格式化的时候生成，再次格式化的时候其值不会改变。 解决方法：先检查以下两个clusterID是否
【hadoop】DataNode用jps查看无法启动解决办法
渊默
12-19 677
其实网上已经有解决办法了，这里自己脑补一下，也可以让别人看到我是怎么解决的。出现这个问题主要是和配置这个文件相关：core-site.xml； fs.defaultFS hdfs://master:9000 hadoop.tmp.dir /home/hadoop/hadoop-2.4.1/tmp 主要和配置的这个/home/hadoop/
hadoop启动后jps没有namenode
热门推荐
hpuyancy的专栏
10-13 4万+
Hadoop namenode无法启动 http://www.codesky.net/article/201208/171226.html 最近遇到了一个问题，执行start-all.sh的时候发现JPS一下namenode没有启动
关于如何解决hadoop jps时没有datanode
Drajor的博客
04-21 1万+
在输入jps命令后，可能会出现无法启动DataNode的情况，如图。 可能原因1： 可能因为多次格式化NameNode会重新生成新的ClusterId（集群ID），而原来的DataNode内data文件下的VERSION文件内的ClusterId还是原来的ClusterId，所以就会出现与NameNode的ClusterId不匹配。 解决方法： 找到存放VERSION的路径 我的是： data/hadoop/hdfs/name/current/ 和 data/hadoop/hdfs/data
评论 5
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值