Hadoop 3.1.1伪分布式模式安装

Hadoop 3.1.1伪分布式模式安装

更多资源

github: https://github.com/opensourceteams/hadoop-java-maven-3.1.1

视频

• Hadoop 3.1.1伪分布式模式安装(bilibili视频) : https://www.bilibili.com/video/av38149957/
• Hadoop 3.1.1伪分布式模式安装(youtube视频) : https://youtu.be/plVkuyJSNF8

width="800" height="500" src="//player.bilibili.com/player.html?aid=38149957&cid=67061213&page=1" scrolling="no" border="0" allowfullscreen="true">

前置条件

• jdk.1.8.0_191 已安装
• linux 系统(本文选用的centos 7 系统已完装好)

技能标签

• 学会安装Hadoop3.1.1版本的伪分布式模式
• 可以进行Hadoop技术开发(包括HDFS,MapReduce等)
• HDFS启动停止命令，yarn启动停止命令
• 官网自带WorldCount示例运行
• 进行管理界面管理NamenNode管理和ResourceManager管理
• 对Hadoop集群环境操作(一台机器也可以做集群，只是节点只有一个，很多功能都可以操作)

安装步骤

安装ssh

• 一般安装系统后都已自带ssh服务，就可以跳过,直接在终端执行ssh命令，有这个命令就可以
• 如果没有需要安装如下服务

yum install ssh
yum install pdsh

下载Hadoop安装包

• 官网下载地址:https://hadoop.apache.org/releases.html
• 本文下载版本: hadoop-3.1.1.tar.gz