Hadoop伪分布式开发环境搭建

一、 准备工作
1、安装虚拟机
（1）打开安装向导；

（2）、接受许可协议，点击下一步；

（3）选择典型安装；

（4）更改安装路径；

（5）等待安装完成。

2、 安装Linux操作系统
（1）打开新建虚拟机向导，选择典型，点击下一步；

（2）更改安装路径；

（3）填写安装信息；

（4）将网络适配器更改为桥接模式；

3、 登录Linux操作系统进行相关配置
（1）查看文件夹结构

（2）、测试网络环境

（3）关闭防火墙
a、关闭并查看firewalld防火墙

b、关闭selinux防火墙


（4）查询固定CentOS虚拟机ip（192.168.43.243）

（5）修改主机名

（6）配置主机名和ip地址映射关系

（7）在/usr/local目录下新建java文件夹

（8）下载linux版本jdk并上传至服务器

（9）解压jdk


（10）配置java环境变量

（11）使设置的环境变量生效

二、 Hadoop伪分布式环境的搭建
1、 安装Hadoop
(1) 新建sun文件夹

(2) 下载Hadoop压缩包并上传至服务器

（3） 解压安装Haddoop


2、 环境变量
（1）配置Hadoop环境变量


（2）应用环境变量配置文件更新

3、修改配置文件
进入$HADOOP_HOME/etc/hadoop/目录

（1）hadoop.env.sh运行环境配置文件


（2）core-site.xml核心配置文件

（3）hdfs–site.xml核心配置文件


（4）mapred-site.xml配置

（5） yarn-site.xml配置

4、格式化系统

5、启动start-dfs.sh、start-yarn.sh时报错，


6、在sbin目录下vi start-dfs.sh、vi stop-dfs.sh、vi start-yarn.sh、vi stop-yarn.sh加入


7、配置SSH免密码登录




8、启动Hadoop

三、 Hadoop测试
(1)通过http://192.168.43.243:9870访问Hadoop管理界面

（2）通过http://192.168.43.243:8088访问MapReduce管理界面