Hadoop伪分布搭建

Hadoop伪分布搭建

实验环境：在此环境下

修改配置文件（以下文件都是出现在hadoop安装路径下的etc/hadoop目录下，以及改动内容都是加些配置）

• hadoop.env.sh

# The java implementation to use.
export JAVA_HOME=/data/module/jdk1.8.0_144 #jdk的安装路径

• core-site.xml
  

#在上图标签间加入以下内容
<!-- 指定 HDFS 中 NameNode 的地址 低版本是8020端口-->
<property>
  <name>fs.defaultFS</name>
  <value>hdfs://chensy:9000</value> #chensy-主机名
</property>
<!-- 指定 hadoop 运行时产生文件的存储目录 -->

<property>
  <name>hadoop.tmp.dir</name>
  <value>/data/module/hadoop-2.7.3/tmp</value> #hadoop安装路径
</property>

• hdfs-site.xml

#加入的位置和上面的一样
<property>
  <name>dfs.replication</name>
  <value>1</value>
</property>
<property>
  <name>dfs.permissions</name>
  <value>false</value>
</property>

• mapred-site.xml（该文件是不存在的，需要将模板文件mapred-site.xml.template改成mapred-site.xml）

<!-- 指定 mr 运行在 yarn 上-->
<property>
  <name>mapreduce.framework.name</name>
  <value>yarn</value>
</propert