【Hadoop学习】_02Hadoop运行环境搭建

一、虚拟机环境准备

1. 新建虚拟机

2. 修改虚拟机的静态IP

   • Vmware虚拟机下三种网络模式配置：https://blog.youkuaiyun.com/collection4u/article/details/14127671
   • 配置静态IP：https://www.codercto.com/a/52805.html

3. 修改主机名：https://blog.youkuaiyun.com/musicenchanter/article/details/80572070

4. 关闭防火墙

   systemctl stop firewalld.service#停止firewall
   systemctl disable firewalld.service#禁止firewall开机启动
   

5. 创建hadoop(可自定义名字)用户

   useradd -m hadoop -s /bin/bash  # 创建新用户hadoop
   passwd hadoop					# 设置用户密码
   

6. 配置hadoop用户具有root权限

   visudo	# 为 hadoop 用户增加管理员权限
   # 在 root ALL=(ALL) ALL下添加一行 hadoop ALL=(ALL) ALL
   

7. 创建所需文件夹（根据个人需要创建）

二、安装JDK

1. 卸载现有的JDK
2. 将JDK包导入到Linux下相关目录中
3. 查看是否导入成功
4. 解压JDK包到相关目录下
5. 配置JDK环境变量
6. 验证JDK是否安装成功
7. 注：修改后的文件使用source命令使该文件生效

三、安装Hadoop

1. Hadoop下载地址
2. 将Hadoop包导入到Linux下相关目录中
3. 查看是否导入成功
4. 解压Hadoop包到相关目录下
5. 配置Hadoop环境变量
6. 测试Hadoop是否安装成功
7. 注：修改后的文件使用source命令使该文件生效；若hadoop命令仍不能使用，可尝试重启虚拟机

四、Hadoop的目录结构

1. bin目录：存放对Hadoop相关服务（HDFS,YARN）进行操作的脚本
2. etc目录：Hadoop的配置文件目录，存放Hadoop的配置文件
3. include目录
4. lib目录：存放Hadoop的本地库（对数据进行压缩解压缩功能）
5. libexec目录
6. LICENSE.txt目录
7. NOTICE.txt目录
8. README.txt目录
9. sbin目录：存放启动或停止Hadoop相关服务的脚本
10. share目录：存放启动或停止Hadoop相关服务的脚本