hadoop学习笔记（五）hadoop伪分布式集群的搭建

本文原创，如需转载，请注明作者和原文链接

1、集群搭建的前期准备   见      搭建分布式hadoop环境的前期准备---需要检查的几个点

2、解压tar.gz包

[root@node01 ~]# cd software/
[root@node01 software]# ll
总用量 179292
-rw-r--r-- 1 root root 183594876 2月  26 2019 hadoop-2.6.5.tar.gz
[root@node01 software]# tar xf hadoop-2.6.5.tar.gz  -C /opt/sxt/
[root@node01 software]# cd /opt/sxt/
[root@node01 sxt]# ll
总用量 0
drwxr-xr-x 9 root root 149 5月  24 2017 hadoop-2.6.5

3、HADOOP_HOME环境变量的配置

[root@node01 hadoop-2.6.5]# vi + /etc/profile

结果如图

配置完毕之后，要重新的去读取一下这个文件

[root@node01 hadoop-2.6.5]# source /etc/profile

 4、java环境变量配置文件的配置

转到目录，注意点：hadoop启动 的时候只会去加载这个目录下的配置文件，如果这个目录下有其他的文件夹的话，没有影响

JAVA_HOME的环境变量的二次设置(原因：因为你启动集群的时候的话，你如果不在这个hadoop的文件下设置某些项的话，他会去找你默认本地的java的配置路径，他会找Local ，但是由于是集群启动，根本没有Local这一说，所以你要在一些配置文件中去配置java的路径，让之启动的时候能够找到，如果你不二次配置的话，可能会出现 java command not found)

 　　　　配置1:    hadoop-env.sh      如果你是只是安装HDFS的话，只改这个配置文件就可以了，但是如果之后会用到mapreduce、yarn等，也需要第二三步的配置

[root@node01 hadoop]# vi hadoop-env.sh

 　　　　配置2：  mapred-env.sh

[root@node01 hadoop]# vi mapred-env.sh

 　　　　配置3： yarn-env.sh

[root@node01 hadoop]# vi yarn-env.sh

结果

 5　　　hadoop的结点及副本配置文件配置

参考hadoop官网即可

Pseudo-Distributed Operation
Hadoop can also be run on a single-node in a pseudo-distributed mode where each Hadoop daemon runs in a separate Java process.

Configuration
Use the following:

etc/hadoop/core-site.xml: