大数据技术_ linux系统 之hadoop 3.1.2版本的安装

环境版本： hadoop 3.1.2版本、CentOS7.8
资料 ：https://download.youkuaiyun.com/download/Coder_Boy_/13085280

1、准备阶段(hduser)

使用hduser账号登陆
上传文件。

解压文件： tar -zxvf ~/hadoop-3.1.2.tar.gz
修改文件名为hadoop： mv hadoop-3.1.2 hadoop

备注：当我们不知道解压后的文件名是什么时 我们可以使用 ls 命令列出当前目录的文件名或文件夹名

2、配置hadoop环境变量(hduser)

编译 sudo vi /etc/profile 文件，在最后加入以下内容：

export HADOOP_HOME=/home/hduser/hadoop
export PATH=$HADOOP_HOME/bin:$HADOOP_HOME/sbin:$PATH
export JAVA_LIBRARY_PATH=/home/hduser/hadoop/lib/native

3、集群配置(hduser)

3.0、进入配置存放目录

3.1、core-site.xml 配置

<?xml version="1.0" encoding="UTF-8"?>
<?xml-stylesheet type="text/xsl" href="configuration.xsl"?>

<configuration>
<property>
<name>fs.defaultFS</name>
<value>hdfs://node1:9000</value>
  </property>
  <property>
<name>io.file.buffer.size</name>
<value>131072</value>
  </property>
  <property>
<name>hadoop.tmp.dir</name>
<value>file:/home/hduser/hadoop/tmp</value>
  </property>
</configuration>

3.2、hadoop-env.sh配置
在最顶上，
多加一行代码

export JAVA_HOME=/usr/java/jdk

3.3、hdfs-site.xml 配置

<?xml version="1.0" encoding="UTF-8"?>
<?xml-stylesheet type="text/xsl" href="configuration.xsl"?>

<configuration>
  <property>
    <name>dfs.namenode.name.dir</name>
    <value