Hadoop2.6.5 分布式集群搭建

最新推荐文章于 2021-12-25 16:21:12 发布

原创

最新推荐文章于 2021-12-25 16:21:12 发布

· 284 阅读

1 ·

版权

文章标签：

#Hadoop

本文详细介绍了如何搭建Hadoop2.6.5的分布式集群，包括安装Hadoop、配置环境变量和组件、分发到从节点、启动HDFS和YARN集群，并提供了验证集群正常运行的步骤和注意事项。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

一、Hadoop2.6.5 分布式集群搭建

1、安装Hadoop

准备安装包：

hadoop-2.6.5.tar.gz

上传到 Linux 服务器上去（我的上传目录是/home/xutao/Desktop/software）

把软件解包解压缩到当前目录下:

tar -zxvf hadoop-2.6.5.tar.gz

2.Hadoop配置

cd /home/xutao/Desktop/software/hadoop-2.6.5/etc/hadoop

(1)配置环境变量hadoop-env.sh

vim hadoop-env.sh
# 在文件的第25行添加JDK的路径
export JAVA_HOME=/home/xutao/Desktop/software/jdk1.8.0_73

(2)配置核心组件core-site.xml

vim core-site.xml

#  HDFS文件系统路径,默认为file:///
#  Hadoop运行时产生文件的临时存储目录
# <configuration> 将以下内容加在这个此</configuration>

<property>
<name>fs.defaultFS</name>
<value>hdfs://hadoop1:9000</value> 
</property>
<property>
<name>hadoop.tmp.dir</name>
<value>/home/xutao/hadoopData/temp</value>