hadoop-伪分布式搭建笔记

dateNode和NodeManager要放到一台主机上；

1、安装jdk并配置环境变量；

2、创建hadoop用户

 3、关闭防火墙

 4、将下载的hadoop包复制到自己用户目录下，解压

        sbin：所有的.sh执行脚本、.cmd（windos脚本）--对集群进行管理的（启动、关闭等）

        bin：命令--负载、HA切换等

        etc/hadoop：hadoop的配置文件

5.1、创建目录：用于保存数据

        naneNode目录在启动前需要被格式化

5.2 声明秘钥用于在其他机器上登入这个机器（免密登入）

5.3将公钥文件导入指定文件中并修改文件权限

 问题：公钥文件不需要修改权限吗？

5.4集群免密设置

        如果集群使用免密登入，需要在操作集群的主机上收集所有需要免密登入机器的公钥

6、hadoop配置及启动

6.1、伪分布式配置文件修改

6.2配置文件配置

7、启动hdfs和yarn

7.1格式化nameNode目录

7.2启动

 8、验证启动进程

 9、页面验证

        HDFS的web端口默认：50070  ；

        yarn的默认端口：8088

        ip+端口验证

nameNode默认端口50070

dataNode默认端口50075