【运维问题】hadoop启动失败:hadoop-functions.sh:行398: 未预期的符号 `<‘ 附近有语法错误

背景

今天安装完单节点的hadoop,执行如下脚本,启动hadoop集群,出现如下报错:

sh start-all.sh

在这里插入图片描述

处理过程

1、开始网上搜索各种资料,找到有个博主提示,直接执行即可。

解决方案

1、换其他的执行方式,都可以启动脚本。

./start-all.sh
bash start-all.sh

在这里插入图片描述

原因

1、在其他地方找到了一个解释:/bin/sh是/bin/bash的软连接,使用sh调用执行脚本相当于打开了bash的POSIX标准模式,也就是说 /bin/sh 相当于 /bin/bash --posix
2、验证一下,确实如此。
在这里插入图片描述
3、使用bash的POSIX标准模式再去执行上面提到的脚本,确实也出现了报错。
在这里插入图片描述
4、简单地讲,posix标准模式,是为了使脚本更好地兼容各平台而提供的一套标准。故语法的规范性更高,上述执行hadoop的相关脚本出现了报错。所以,如果是部署在liunx上的脚本,可以直接使用bash执行,语法要求相对较低。

当你看到这个错误提示 "BigData: /opt/modules/hadoop/hadoop3.3.6/libexec/hadoop-functions.sh: 1848: /tmp/hadoop-bigdata-namenode.pid: 权限不够",它意味着在Hadoop集群的NameNode服务启动过程中,由于权限不足,无法创建或访问名为"/tmp/hadoop-bigdata-namenode.pid" 的PID文件。PID (Process ID) 文件是用来存储进程ID的,这对于追踪和管理进程至关重要。 解决这个问题通常需要以下步骤: 1. **更改权限**:确保当前用户对 "/tmp" 目录有足够的权限去写入文件。尝试使用 `chmod` 命令给该目录及其下文件增加写权限: ``` sudo chmod -w +x /tmp ``` 2. **以root权限运**:如果上述操作无效,可能是由于你是普通用户并且某些Hadoop组件需要root权限才能创建PID文件。在这种情况下,可以尝试以root身份运命令: ``` sudo hadoop namenode -format ``` 或者在执其他Hadoop命令时加上 `sudo`。 3. **检查组权限**:确认"/tmp"目录是否属于正确的用户和组,并给予相应的执权限: ``` chown [username] /tmp chmod g+x /tmp ``` 其中 `[username]` 应替换为Hadoop所需的实际用户名。 4. **检查配置**:确保Hadoop配置文件 (`hadoop-site.xml`) 中关于NameNode的数据保存路径和权限设置正确。 5. **更新SELinux策略**:如果你正在使用SELinux,可能需要调整相关的安全上下文规则。 完成以上步骤后,尝试重新启动NameNode服务看看问题是否解决。如果问题依然存在,可能需要进一步排查Hadoop日志文件以获取更多详细信息。
评论 2
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值