配置HDFS jps 查看不到 namenode or datanode

最新推荐文章于 2023-09-06 18:34:08 发布
最新推荐文章于 2023-09-06 18:34:08 发布
阅读量570 收藏
点赞数
文章标签： hadoop hdfs mapreduce
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.youkuaiyun.com/qq_43816521/article/details/107922734
版权

version hadoop-2.9.2

如果配置了主机映射，查看 core-site.xml中主机映射 or 主机IP是否正确 修改之后重启验证：

1.删除data和logs
2.jps然后kill占用端口的一些进程
3.格式化nameode
4.启动 namenode
5.启动 datanode
6.jps检验

如果不是IP问题再查看log文件，检查其他配置信息，一般不会是太麻烦的问题

AMRAD
关注
Hadoop集群开启后使用jps命令查看发现没有NameNode、SecondaryNameNode、DataNode、NodeManager进程，缺少进程。
m0_74132943的博客
09-12 3060
今天安装Hadoop集群，安装完成使用jps命令查看发现没有NameNode、SecondaryNameNode、DataNode、NodeManager进程，别人jps后都有6个在跑，我就两个。重启服务...........................................................
解决 hadoop 在网页上查看 livenodes 为 0 但是使用 jps查看却存在 datanode
.
12-04 1621
笔者用三台虚拟机模拟全分布环境，start-dfs.sh 启动 HDFS 之后，在三台机器上执行 jps 命令分别看到了如下信息： NameNode，SecondaryNameNode DataNode DataNode 主节点 NameNode，两个从节点 DataNode 均显示正常，但是通过 50070 端口在网页上查看 NameNode 的信息时，却发现 live nodes 数量为0...
hadoop2.5.x搭建集群启动jps在datanode节点无法显示datanode
xiaoyao_li的专栏
05-27 612
问题解决办法：      在datanode节点下，删除VERSION文件，具体为：/hadoop-2.5.0/data/dfs/data/current目录下的VERSION文件。
启动HDFS时jps查看不到namenode
最新发布
qq_56581457的博客
09-06 2906
启动服务遇到问题不要慌，先查看日志文件根据日志文件中的信息来对症下药，如果日志文件内容较多可以使用tail -显示的行数 文件来指定显示末尾多少行。
关于Hadoop集群配置当中jps查询缺少配置文件
qq_62599142的博客
09-13 2064
启动 Hadoop 集群，需要启动 HDFS 集群跟 YARN 两个集群，两个集群分别有两种节点，即 HDFS: （1）NameNode 管理节点 （2）datanode 工作节点 （3）SecondaryNameNode 辅助管理节点 YARN: （4）ResourceManager ：是一个中心的服务，它做的事情是调度、启动每一个 Job 所属的 ApplicationMaster、另外监控 ApplicationMaster 的存在情况。删除新建的hadoop集群，再重新装一次，下面是具体的步骤。
关于namenode和datanode闪退问题的解决方案之一（hdfs dfs -put 不能使用的原因之一）
andy_puth的博客
04-14 678
事情是这样的，今天打开hive准备进行分区表操作 结果传输本地文件到集群时出问题：hdfs dfs -put 不能使用 本文是解决的方法之一 不是唯一 哦
深入剖析HDFS：数据块、NameNode和DataNode的内部机制
[深入剖析HDFS：数据块、NameNode和DataNode的内部机制](https://media.geeksforgeeks.org/wp-content/uploads/20200618125555/3164-1.png) # 1. HDFS概述 ## 1.1 HDFS的定义与功能 Hadoop分布式文件系统（HDFS）...
【若泽大数据实战第十一天】HDFS课程 - 副本数 Block Namenode、datanode、、SecondaryNameNode
强悍de巨人
05-20 1834
前言：我把kafka的前置课程写完了，对kafka有了一定的了解，接下去我将把HDFS的课程写的详细一些。1.HDFS进程NameNode（NN）：名称节点  ->   client第一个操作的对象DataNode（DN）：数据节点    --> 存储数据的 Secondary NameNode（SNN）--> 第二名称节点2.block（数据块）block大小：      默认...
配置Hadoop实验环境 运行jps后未显示datanode或者namenode
dddfuc的博客
10-08 4518
配置Hadoop实验环境 运行jps后未显示datanode或者namenode 1.运行jps后未显示datenode 未显示datanode的原因一般都是多次格式化HDFS的原因：即多次执行 hdfs namenode -format 的结果。多次格式化会使得name和date下的clusterID不一样。因为每次格式化后name下的clusterID都会被改变，但是data下的clusterID只会在第一次格式化的时候生成，再次格式化的时候其值不会改变。 解决方法：先检查以下两个clusterID是否
Hadoop jps各个进程的功能解析
lockie的博客
12-04 1万+
一般如果正常启动Hadoop，我们可以在master上通过jps命令看到以下5个daemons:（单机） [root@master ~]# jps 19803 SecondaryNameNode 19994 TaskTracker 31144 Jps 19571 NameNode 19672 DataNode 19887 JobTracker hadoop2.0以后的版本采用的是YARN作...
Linux系统Hadoop伪分布式模式配置
stepondust 的课堂
02-07 5687
一、修改配置文件 需要配置相关文件，才能够让Hadoop在伪分布式模式下顺利运行，Hadoop的配置文件位于/usr/local/hadoop/etc/hadoop/中，进行伪分布式模式配置时，需要修改2个配置文件，即core-site.xml和hdfs-site.xml。 可以使用vim编辑器打开core-site.xml文件，它的初始内容如下： <configuration> &l...
hadoop之JPS命令真相与hadoop进程PID剖析
君永夜
02-23 1593
1.jps命令简介 选项 作用 -q 只输出LVMID,省略主类的名称 -m 输出启动时，传给main（）函数的参数 -l 输出主类全类名 -v 输出jvm参数 jps命令是显示正在运行的java程序，root用户使用时显示所有运行的java程序，普通用户只显示自己启动的正在运行的java程序，而ps显示所有的进程，包括java程序。然而jps显...
Hadoop分布式文件系统HDFS原理以及操作(一)
zy10151的博客
04-21 2352
HDFS简介：活动在集群上并支持以流式数据访问模式来存取超大文件。存储设计是把海量数据部 署在价格低廉的节点上，具有高容错性和高吞吐量特性。HDFS的设计首要是针对超大文件存储，而对于小的文件访问和存储速度反而会降低。
hadoop中使用 jps的正确姿势
Nice的博客
09-10 1万+
Hadoop 的 jps 命令 jps的主要功能是查看java接口的进程号 jps(Java Virtual Machine Process Status Tool) 是JDK 提供给我们的一个查看当前所有java进程PID的命令，缺点是只支持当前用户的Java进程，要显示其他用户还是只能够 用ps命令 1.jps命令类似于Linux的ps命令 ，直接运行jps命令，显示的是java程序的进程I...
jpsnamenode和不显示_jps 查看不到namenode进程
weixin_39766867的博客
12-20 873
我修改core-site.xml中的 hadoop.tmp.dir，之后重新启动，在root用户下，jps，还是看不到进程id对应的虚拟机执行的主类。1：core-site.xml配置如下[root@SU-1 master]# cat /usr/lib/hadoop/etc/hadoop/core-site.xmlfs.defaultFShdfs://SU-1:8020fs.trash.inte...
hadoop启动后jps没有namenode
hpuyancy的专栏
10-13 4万+
Hadoop namenode无法启动 http://www.codesky.net/article/201208/171226.html 最近遇到了一个问题，执行start-all.sh的时候发现JPS一下namenode没有启动
jps命令没有namenode或datanode, 怎么解决？
热门推荐
missTu~的博客
11-26 4万+
1、为什么会出现这样的问题？ （1）直接关闭了虚拟机，没有停止hadoop的集群 （2）没有停止hadoop的集群，又重新启动集群 （3）格式化namenode之前，没有删除data里的数据和logs日志，造成导致NameNode和DataNode的集群id不一致的情况。 2、解决方法（一定要按顺序操作） （1）停止hadoop集群 stop-all.sh (2) 删除data数据和logs日志...
Hadoop | 解决启动Hadoop，jps后无namenode,datanode等进程
martinniee
01-11 1万+
问题描述 最近因为想修改一下主机名，用户名什么的 但是一开始没有注意到主机名和用户名对于Hadoop服务的影响 导致修改后，导致Hadoop启动，失败，即jps后，没有namenode,datanode，显然这两个文件对于hadoop是至关重要的，要不然无法获取数据 一开始没有考虑查看日志排错(因为对于异常处理方面不敏感:???? 因为机缘巧合，碰巧试了试，然后就行了 之所以出错，归根结底还是对于原理不熟 解决方案 首先要知道Linux下的主机名和用户名是什么，如何查看 命令行终端下 格式 : 用户名@主机
Hadoop配置与集群启动详解：从hdfs-site.xml到 Namenode/Datanode设置
- 启动NameNode和DataNode服务：`hdfs-daemon start namenode` 和 `hdfs-daemon start datanode` - 检查进程是否启动：使用`jps`命令查看Hadoop相关的Java进程 - 查看日志：进入logs目录并检查日志文件，确认集群...
评论 1
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值