虚拟机节点启动异常的解决方法

有些时候我们在使用命令

./start-dfs.sh
./start-yarn.sh

之后,再使用jps命令,会发现缺少很多进程
对于这种情况,一般有下面几个原因,我在下面做了归纳

一,未使用root账户

对hadoop集群服务的操作需要权限,如果
没有使用root(或者hadoop账户),请更换用户后再进行操作

二,防火墙未关闭

如果datenode已经启动,但是namenode上无法显示,有可能是因为防火墙未关闭,两者无法通信,关闭防火墙即可

systemctl stop firewalld.service #停止firewall  
systemctl disable firewalld.service #禁止firewall开机启动  

三,未初始化namenode

要启动Namenode首先需要对他进行初始化,想想自己之前有没有输入指令hdfs namenode -format,如果没有,先输入指令./stop-dfs.sh./stop-yarn.sh停止集群,再输入指令hdfs namenode -format初始化节点,再./start-dfs.sh./start-yarn.sh启动集群,再次查看jps

四,未修改tmp目录

如果第一次确认已经运行成功,重启之后却不行了,可以想想你是否自定义了tmp目录,tmp目录下的文件是临时文件会被定期删除的,与此同时namenode的格式化信息就会丢失,虚拟机每次重启临时文件都会复原,如果不自定义位置的话,每次重启都得初始化,那样太麻烦了,你不再执行一次指令hdfs namenode -format,他就无法正常启动,怎么解决这个问题呢?

其实也很简单,自己设置一下地址就好了
输入指令

vi  ./hadoop-2.7.7/etc/hadoop/core-site.xml

在文件末尾的 configuration 之间添加下列内容

	<property> 
		<name>fs.defaul
### 如何在虚拟机上成功启动 ZooKeeper #### 配置环境变量 为了确保 ZooKeeper 能够顺利运行,在虚拟机环境中设置正确的 Java ZooKeeper 环境变量至关重要。确认 `JAVA_HOME` 已经被正确配置,并且可以执行 `java -version` 命令来验证安装情况。 #### 修改配置文件 检查并修改 ZooKeeper 的配置文件 `zoo.cfg` 中的数据目录路径,确保使用正斜杠 `/` 来指定路径而不是反斜杠 `\`[^4]。例如: ```properties dataDir=/opt/zookeeper/data dataLogDir=/opt/zookeeper/logs ``` #### 设置 myid 文件 创建一个名为 `myid` 的文件放在上述配置中的 `dataDir` 下面,里面只包含代表当前节点 ID 的单个整数。对于独立模式下的 ZooKeeper 实例来说,这个值通常是 1。 #### 启动服务命令 利用 systemctl 或者直接调用 bin 目录下的 zkServer.sh 脚本来启动 ZooKeeper 服务器: ```bash sudo systemctl start zookeeper # 如果有systemd支持的话 # 或者 $KAFKA_HOME/bin/zkServer.sh start $ZOOKEEPER_CONFIG_FILE_PATH ``` #### 日志记录与调试 如果遇到连接超时异常 java.util.concurrent.TimeoutException,则可能是由于客户端无法及时建立到 ZooKeeper 的会话造成的[^2]。此时应该查看日志文件了解具体错误详情;另外也要注意防火墙规则是否阻止了必要的端口通信 (默认情况下 ZooKeeper 使用的是 2181 端口)。 #### 测试连通性 最后一步是在另一台机器上尝试 telnet 到目标地址的 2181 端口以检验网络可达性基本功能正常与否。 #### 添加日志框架依赖 当在宿主机中通过Java程序去操作 Kafka Broker 发生问题时,可能是因为缺少 SLF4J 这样的日志门面库及其背后的具体实现类(比如 logback),这会影响应用程序的日志输出机制从而难以定位故障所在[^3]。因此建议开发者们务必引入合适的 logging provider 并调整好相应的属性设定以便更好地捕捉潜在隐患。
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值