hadoop集群启动的一些小错误

最新推荐文章于 2025-05-06 11:04:43 发布
原创 最新推荐文章于 2025-05-06 11:04:43 发布 · 327 阅读 · 0 ·
CC 4.0 BY-SA版权
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
文章标签：

#hadoop #大数据

本文介绍了解决Hadoop中出现的“processinformationunavailable”错误的方法，包括清理临时文件和正确重启组件的步骤。同时，提到了多次格式化可能带来的问题及解决方案。

① process information unavailable
通过jps命令查看hadoop状态后发现

-- process information unavailable

运行以下代码

rm -rf /tmp/hsperfdata_*

重启各个组件，就能解决问题
造成原因：意外关闭机器，或者没有按照顺序关闭各个组件。

② 格式化多次
把hadoop260下的dfs和logs删除后重新格式化

Hadoop集群启动从节点没有DataNode
m0_61232019的博客
03-03 8829
之前启动hadoop集群的时候都没有问题，今天启动hadoop集群的时候，从节点的DataNode没有启动起来。
【Hadoop集群搭建】集群崩溃处理及启动时常见报错解决办法
布丁椰奶冻的博客
06-20 1306
1. 集群崩溃处理 1.1 杀死进程 1.2删除目录（logs/和hadoopdata/） 1.3重新初始化集群 1.4重新启动集群 2. 启动时常见报错 在运行程序测试 MapReduce 计算框架时报错如下
hadoop 常见错误
junshao90的专栏
10-18 739
转自：http://my.oschina.net/u/248570/blog/42614 （一）启动hadoop集群时易出现的错误： 1.   错误现象：java.net.NoRouteToHostException: No route to host.    原因：master服务器上的防火墙没有关闭。    解决方法: 在master上关闭防火墙
Hadoop 2.6.4集群启动报错java.io.IOException: All specified directories are fail
chunguang.yao的博客
05-26 404
之前在自己本地的电脑上安装了3个linux机器来搭建hadoop集群，前面一段时间是使用三台来进行练习，后面发现电脑内容有点紧，就切换为两台。最近给电脑加了内存之后，就想把三台一起启动了。但是发现之前一直没用的那台没能起来，就去查看日志。 到mini3机器的日志目录，查看日志： 由错误日志可以看出来是当前机器的集群id和nameNode的集群id不相同，导致该节点无法加入集群 ...
Hadoop集群出现的错误1
haojieji的博客
05-27 143
在做集群时不小心没有把master名字改为haoop01，而且连续将错误语句enter两次，因此在把名字改回来之后，还是出现以下错误。 用了好多csdn上的方法还是错误。 后来我重新写入之前（以下）的代码 就可以了 ...
hadoop集群启动常见异常
热门推荐
二师兄撒欢之地
05-28 1万+
1、hadoop节点的本地工作目录访问异常（权限）2、namenode处于安全模式，导致无法上传数据namenode在刚刚启动的时候处于安全模式不一定是异常，但是如果启动完成之后一直不退出安全模式，就有问题，可以用以下指令尝试手动退出 hdfs namenode -safemode leave 如果退出不成功，可以查看日志信息或者关闭重启3、start-dfs.sh后，直接上传文件，发现上...
Hadoop集群启动常见异常
侠客小虎的博客
04-08 1368
1、hadoop节点的本地工作目录访问异常（权限） sudo chown -R administor:administor dfs/ 2、namenode处于安全模式，导致无法上传数据 namenode在刚刚启动的时候处于安全模式不一定是异常，但是如果启动完成 之后一直不退出安全模式，就有问题，可以用以下指令尝试手动退出     hdfs namenode -safemode
hadoop集群启动失败
05-19
Hadoop集群启动失败可能有多种原因，下面给出一些常见的...如果以上方法都不能解决问题，可以查看Hadoop集群启动时生成的日志文件，查找错误信息并进行排查。 希望以上方法能够帮助您解决Hadoop集群启动失败的问题。
Hadoop集群故障排查
最新发布
ruoer1的博客
05-06 1908
Hadoop 集群故障排查是保障集群稳定运行的关键，需要从多个层面进行系统检查和分析。HDFS 是 Hadoop 的分布式文件系统，是 Hadoop 集群的核心组件之一，需要重点排查。YARN 是 Hadoop 的资源管理系统，负责集群资源的分配和任务调度，需要进行排查。在故障解决后，需要对故障进行总结和分析，制定相应的预防措施，避免类似故障再次发生。网络问题是导致 Hadoop 集群故障的常见原因之一，需要检查网络连接和配置。软件配置错误或版本不兼容也可能导致 Hadoop 集群故障，需要进行检查。
Hadoop集群搭建
更深兼春远的博客
12-25 2040
一、虚拟机的创建二、防火墙有关命令。
hadoop启动集群前格式化操作
03-22
格式化操作。格式化操作。格式化操格式化操作。
启动hadoop集群时遇到的问题
弦断的马丁的博客
03-19 175
老是报这个问题，但是集群是可以正常启动的。 暂时不知道为啥
jps -- process information unavailable-hadoop集群错误
执笔的博客
07-01 611
之前集群正常，装了个MySQL后，jps就变成了这样了，我试了许多方法，就这个对我有用，特此记录，防止日后类似问题。 错误： 之前的： 解决： （1）首先删除 /tmp/下的 hsperfdata_用户名 文件，我的是hsperfdata_root，参考以下博客。 原文链接：https://blog.youkuaiyun.com/qq_42385284/article/details/89503773 （2）重新启动hadoop。 提示进程还在运行。 （3）关闭集群，再重新启动 .
hadoop在启动时报错如何定位到错误
yinbucheng的博客
04-30 507
在hadoop目录下有个logs目录里面会记录你的操作日志。 比如我是root用户在进行 journalnode失败 我查看的日志是 less hadoop-root-journalnode-hadoop5.log
查看进程时，遇到process information unavailable的解决方法
JiaXingNashishua的博客
08-23 991
查看以hsperfdata_开头的目录，进入可疑的目录查看，比如说我现在kill了一个namenode的进程，然后出现了上诉问题，这时候，我就可疑进入到hsperfdata_hdfs目录查看。不同账号之间kill进程时，可能会造成这种现象（比如在axing用户启动了一个进程，但是用root用户去kill，虽然杀掉了，但是查看进程时偶尔就会出现）知道与上述端口相同的文件，然后rm -rf 删除这个文件。最后查看进程，就发现这个语句没有了。cd /tmp,进入系统目录。
Linux系统下jps报process information unavailable的解决办法
blessness的博客
08-15 1016
本人今天配置hadoop，在查看hadoop服务状态的时候，jps报了process information unavailable的信息，在这里提出解决方案。 详情截图： 分析缘由： 使用jps命令查看java进程，经常出现类似"1850 – process information unavailable"，可能有两点原因： 1.1850这个PID存在，原因为当前ID为其他用户启动，该用户没有查看权限。 2.1850这个PID不存在。 解决方案： 1.首先使用ps -ef 命令查看该进程是否存在 [ro
已解决:XXXX -- process information unavailable
qq_43408367的博客
08-04 3499
今天遇到了昨天的遇到TCP问题，但是我昨天已经处理过了，结果今天又不行了，查了一圈，发现了一个异常，jps之后，还是有一个process information unavailable，重启过后还是存在，本来想着直接执行。快速清除掉这个残留进程。最后，放弃了，因为Hadoop集群还在运行，所以，最后决定还是翻一下/tmp进去单独清理一下。...
Linux 踩坑记录
DMDD_NB的博客
03-22 6594
查看进程是出现 process information unavailable 进入/tmp目录 cd /tmp 可以看到有很多以hsperfdata_{用户名}这样的目录，比如：hsperfdata_hbase，hsperfdata_kafka，hsperfdata_root这样的目录，是因为进程虽然在内存中关闭了，但是Linux还会在/tmp下寻找这些临时文件，而此时临时文件并没有没正常删除，...
hadoop环境服务修复及hive整合
qq_38075749的博客
11-03 1230
hadoop环境服务修复 还没上班就看群里说园区断电，然后就有服务器断电后 启动hadoop集群服务显示 （大多数原因是某个组件崩了） -- process information unavailable 运行以下命令 rm -rf /tmp/hsperfdata_* 然后重启服务 在一键启动hadoop后（./start-all.sh ），服务没起来，额，似乎没啥用 emm 服务关闭 后 在重新启动后 发现 没有namenode 那就查看日志 和昨天晚上 的错误 如出一辙 ，na
hadoop集群启动脚本
03-12
好的，我需要帮助用户查找关于Hadoop集群启动脚本的示例以及常见问题的解决方案。首先，我得理解用户的需求，他们可能正在学习如何编写Hadoop的启动脚本，或者在启动集群时遇到了问题，需要解决方法。根据用户提供的...
评论
成就一亿技术人!
拼手气红包6.0元
还能输入1000个字符
 
红包 添加红包
表情包 插入表情
表情包 代码片
 条评论被折叠 查看
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值