解决错误:/opt/module/hadoop-2.7.2/sbin/yarn-daemon.sh:行125: /tmp/yarn-hadoop-resourcemanager.pid: 权限不够

本文记录了在启动Hadoop集群YARN时遇到的权限不足错误,并分享了解决过程,包括重新format、查看日志、更换机器等尝试,最终发现SSH配置可能是导致问题的原因。

摘要生成于 C知道 ,由 DeepSeek-R1 满血版支持, 前往体验 >

今天启动集群的YARN时,报了一个这样的错误。

它最先报的是这样一个错误:

log4j:ERROR setFile(null,true) call failed. java.io.FileNotFoundException: (权限不够)

然后我重新format了以下就转为了下面这个错误:

/opt/module/hadoop-2.7.2/sbin/yarn-daemon.sh:行125: /tmp/yarn-hadoop-resourcemanager.pid: 权限不够

下面是我的尝试的各种方法:
1. 猛地一看是权限问题,但是我的权限确实已经修改过了,确认没有问题。
2. 我又重新搭建了一遍Hadoop,结果还是这个错误。
3. 必杀技:看日志logs,上面说的是hadoop03:8031(我的resourcemanager在hadoop03上)地址被别占用了,接下来肯定是杀死占用的程序,但是依然么用。
4. 更换机器我把resourcemanager从hadoop03搬到hadoop04上了,问题解决了。但是我还是不太明白原因。我的三和四机器的区别就是,我没在四上面配置以root用户ssh登录到其他机器上,但是三配置了,所以在此记录下,希望大佬指教。
当你看到这个错误提示 "BigData: /opt/modules/hadoop/hadoop3.3.6/libexec/hadoop-functions.sh: 1848: /tmp/hadoop-bigdata-namenode.pid: 权限不够",它意味着在Hadoop集群的NameNode服务启动过程中,由于权限不足,无法创建或访问名为"/tmp/hadoop-bigdata-namenode.pid" 的PID文件。PID (Process ID) 文件是用来存储进程ID的,这对于追踪和管理进程至关重要。 解决这个问题通常需要以下步骤: 1. **更改权限**:确保当前用户对 "/tmp" 目录有足够的权限去写入文件。尝试使用 `chmod` 命令给该目录及其下文件增加写权限: ``` sudo chmod -w +x /tmp ``` 2. **以root权限**:如果上述操作无效,可能是由于你是普通用户并且某些Hadoop组件需要root权限才能创建PID文件。在这种情况下,可以尝试以root身份运命令: ``` sudo hadoop namenode -format ``` 或者在执其他Hadoop命令时加上 `sudo`。 3. **检查组权限**:确认"/tmp"目录是否属于正确的用户和组,并给予相应的执权限: ``` chown [username] /tmp chmod g+x /tmp ``` 其中 `[username]` 应替换为Hadoop所需的实际用户名。 4. **检查配置**:确保Hadoop配置文件 (`hadoop-site.xml`) 中关于NameNode的数据保存路径和权限设置正确。 5. **更新SELinux策略**:如果你正在使用SELinux,可能需要调整相关的安全上下文规则。 完成以上步骤后,尝试重新启动NameNode服务看看问题是否解决。如果问题依然存在,可能需要进一步排查Hadoop日志文件以获取更多详细信息。
评论 4
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值