hadoop伪分布搭建

本文详细介绍如何在一台虚拟机上搭建伪分布的Hadoop集群,包括JDK8环境搭建、主机名及路由配置、防火墙及内核安全模块关闭、免密登录设置、Hadoop压缩包下载解压及环境变量配置等关键步骤。

摘要生成于 C知道 ,由 DeepSeek-R1 满血版支持, 前往体验 >

我们使用一台虚拟机进行伪分布搭建,这也是为什么叫伪分布搭建

第一步,jdk8环境搭建

将jdk8压缩包上传到/opt上,可以使用xftp来上传,然后使用tar zxf jdk-8u121-linux-x64.tar.gz命令解压,然后再配置文件中配置,如下
在这里插入图片描述

第二步,修改主机名,配置主机路由表

这是为了疑惑我们能够使用主机名字就可以代替输入ip地址去访问了。
这是修改主机名在这里插入图片描述
这是修改本地路由,输入指令vi /etc/hosts进入后修改,成下面这样(其实只有bd1一台就可以了)
在这里插入图片描述

第三步,关闭防火墙和内核安全增强模块

使用service iptables status查看防火墙状态,使用getenforce查看内核安全增强模块,关闭以前写过。

第四步,配置服务器之间的免密登录

使用下面这条命令
在这里插入图片描述
然后一直回车确认就行了(意思是不需要设置密码或者其他东西),差不多是这样
在这里插入图片描述
然后在ssh下面就会生成文件
在这里插入图片描述
然后传输秘钥,使用
在这里插入图片描述
指令,四台机器都要输,也就是bd1到bd4输4次。
这样我们就可以免密登录其他主机
可以使用ssh 主机名试一试。

第四步,下载解压hadoop压缩包

也是使用xftp来上传的,我们可以使用
tar -zxvf hadoop-2.7.5.tar.gz可以显示解压过程,也可以加-C,解压到其他的地方

在这里插入图片描述

第五步,配置环境变量

和配置jdk变量相同,配置完成后是这个样子
在这里插入图片描述

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值