hadoop的集群启动与关闭指令

最新推荐文章于 2024-07-18 11:21:28 发布

编程爱

最新推荐文章于 2024-07-18 11:21:28 发布

阅读量1.6k

点赞数

分类专栏： Hadoop集群文章标签： hadoop 大数据分布式

本文链接：https://blog.youkuaiyun.com/Rain_2021245488/article/details/131992609

版权

Hadoop集群专栏收录该内容

9 篇文章

订阅专栏

文章介绍了如何启动和关闭Hadoop集群，包括HDFS和YARN集群的整体与单个节点的启停方法。整体启停通过start-dfs.sh,stop-dfs.sh,start-yarn.sh,stop-yarn.sh等脚本执行，而单个节点的控制涉及到hadoop-daemon.sh或yarn-daemon.sh命令。在关闭虚拟机前，需确保集群已全部停止，以避免影响下次使用。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

前言

前面我们搭建好了集群，现在可以实现启动和关闭集群，实际上，启动集群就是在每台机子上启动相应的进程，这些进程我们通常称呼它们为角色，角色又有主从之分。我们要想使用集群，就必须得有这样的角色，就好比一个企业里的各种设施和配置都准备好了，得有员工才能工作，最终干活的肯定是这些员工（角色）。

一、启停集群

Hadoop集群 = hdfs集群 + yarn集群，集群的启停方式有两种：单个启停和整体启停。

单个启停指可以精准控制某个节点集群的启停，但指令比较麻烦，现实中较少用到；
整体启停指可以控制所有节点集群的启停，但由于是所有节点，现实生产环境中，集群一旦启动，不太可能会选择全部关闭。

1、整体启停

hdfs集群

start-dfs.sh
stop-dfs.sh

yarn集群

start-yarn.sh
stop-yarn.sh

hadoop集群(用到最多的一个)

start-all.sh
stop-all.sh

注意：关闭虚拟机之前，必须关闭所有集群，以免影响下次使用

2、单个启停

hdfs集群

#hadoop2.x版本
hadoop-daemon.sh start|stop namenode|datanode|secondarynamenode
#hadoop3.x版本
hdfs --daemon start|stop namenode|datanode|secondarynamenode

yarn集群

#hadoop2.x版本
yarn-daemon.sh start|stop resourcemanager|nodemanager
#hadoop3.x版本
yarn --daemon start|stop resourcemanager|nodemanager