基础环境的搭建参考:Hadoop学习准备工作 - Centos 7 系统安装与配置
一、 伪分布式
伪分布式是指:hadoop的守护进程以独立进程形式运行在单一节点上。
二、 Hadoop部署与配置
1、 hadoop部署
从官网获取 hadoop稳定版,安装到指定目录下:/home/root
tar -zxvf hadoop-3.1.0.tar.gz
等待解压缩完成后,vi /etc/profile 编辑环境变量 -->
export HADOOP_HOME=/home/root/hadoop-3.1.0
保存退出,执行 source /etc/profile使变量生效。
编辑 vi etc/hadoop/hadoop-env.sh -->
# JAVA_HOME
export JAVA_HOME=/home/root/jdk/jdk1.8.0_171
# USERS
export HDFS_NAMENODE_USER=root
export HDFS_DATANODE_USER=root
export HDFS_SECONDARYNAMENODE_USER=root
export YARN_RESOURCEMANAGER_USER=root
export YARN_NODEMANAGER_USER=root
保存退出后,执行 bin/hadoop 验证 hadoop 的可用性:
[root@skynet hadoo