搭建Hadoop过程(单机版)

本文详细介绍了在CentOS7系统下,如何以root用户身份搭建Hadoop(HDFS和YARN)的单机版环境。首先创建虚拟机并安装必要的软件,然后关闭防火墙和selinux,接着进行JDK的安装和环境变量配置。通过设置免密登陆,进行Hadoop的配置,包括修改hadoop-env.sh、core-site.xml、hdfs-site.xml、slaves等文件,初始化HDFS并启动。最后验证HDFS和YARN服务是否成功运行。

过程均在root用户下操作

创建一个虚拟机:

我用的CentOS7 64位,虚拟机名称为Hadoop,D:\虚拟机\Hadoop
root密码:123456
用户xjl 密码:123456

准备工作:

安装工具:

yum install net-tools
yum install vim

关闭防火墙:

sudo systemctl stop firewalld.service
sudo systemctl disable firewalld.service

关闭selinux:

sudo vim /etc/selinux/config
//修改为 SELINUX=disabled

文件:

文件存放在目录:/opt下
1.hadoop-2.7.7.tar.gz
2.jdk-8u171-linux-x64.tar
解压文件:

tar -zxvf hadoop-2.7.7.tar.gz
//    /opt/jdk1.8.0_171
tar -zxvf jdk-8u171-linux-x64.tar
//    /opt/hadoop-2.7.7

创建HDFS的NN和DN工作主目录:用在后面配置core-site.xml文件中

<
评论
成就一亿技术人!
拼手气红包6.0元
还能输入1000个字符
 
红包 添加红包
表情包 插入表情
 条评论被折叠 查看
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值