虚拟机搭建Hadoop集群（单机模式）

最新推荐文章于 2025-03-05 15:53:55 发布

小猫奇点

最新推荐文章于 2025-03-05 15:53:55 发布

阅读量3.5k

点赞数 2

分类专栏：软件安装

本文链接：https://blog.youkuaiyun.com/sophiezjz/article/details/82979229

版权

本文档详细介绍了如何在虚拟机上搭建Hadoop单机模式集群，包括下载Hadoop、安装、配置环境变量、启动与停止HDFS及YARN，以及HDFS的常用操作。通过此教程，读者可以成功建立一个简单的Hadoop测试环境。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

首先，请确保你已经安装了虚拟机，并安装配置了JAVA环境，需要这两方面教程的，请参考：

1、虚拟机， http://blog.youkuaiyun.com/uq_jin/article/details/51355124

2、JAVA， http://blog.youkuaiyun.com/uq_jin/article/details/51356799

下面开始在虚拟机上搭建单机模式的Hadoop集群。

一、下载Hadoop

下载地址为： http://apache.fayea.com/hadoop/common/

选择你要安装的Hadoop版本，下载到本地，楼主用的是Hadoop-2.6.4。

二、安装Hadoop

将下载下来的Hadoop压缩包上传至虚拟机根目录，并解压、重命名：

tar xzvf hadoop-2.6.4.tar.gz
mv hadoop-2.6.4 hadoop

三、配置并启动Hadoop

1、修改hadoop/etc/hadoop/hadoop-env.sh中Java的安装路径JAVA_HOME

当配置了环境变量JAVA_HOME时，直接用“echo $JAVA_HOME”命令即可定位Java安装路径；

echo $JAVA_HOME

但是如果没有配置环境变量JAVA_HOME，直接用“echo $JAVA_HOME”命令就定位不到Java安装路径，这时候需要用以下方法进行定位：

[root@localhost ~]# java -version
java version "1.8.0_181"
Java(TM) SE Runtime Environment (build 1.8.0_181-b13)
Java HotSpot(TM) 64-Bit Server VM (build 25.181-b13, mixed mode)

[root@localhost ~]# which java
/opt/java/jdk1.8.0_181/bin/java

[root@localhost ~]# ls -lrt /opt/java/jdk1.8.0_181/bin/java
-rwxr-xr-x. 1 10 143 7734 Jul  7 04:06 /opt/java/jdk1.8.0_181/bin/java

知道了虚拟机中JAVA安装路径&#x