Hadoop 3.0 伪分布式安装配置教程 (基于Centos)

本教程详细介绍了如何在Centos系统上安装配置Hadoop 3.1.1的伪分布式模式。内容包括JDK安装、SSH配置、Hadoop下载及解压,以及核心配置文件如hadoop-env.sh、core-site.xml、hdfs-site.xml的设置。最后,文中还列出了启动和验证Hadoop集群操作的步骤。

摘要生成于 C知道 ,由 DeepSeek-R1 满血版支持, 前往体验 >

截止到19年,Hadoop 最新的版本已经出到 3.1.1 版本了,下面就以 该版本为例,详细分析分布式安装的步骤。Hadoop 有三种安装方式,包括:

1. 单机模式

2. 伪分布式模式

3. 分布式模式

零、准备工作

准备好需要安装 Hadoop 的机器,本文使用的是 4 台 centos 机器,分别是 node1, node2, node3 和 node4,需要预先准备好 Hadoop 的安装环境。

1. jdk安装配置

下载jdk文件至每台机器:

wget http://10.18.218.14/download/jdk-8u131-linux-x64.rpm

rpm -Uvh jdk-8u131-linux-x64.rpm

配置java的环境变量:

vim /etc/profile

增加:

export JAVA_HOME=/usr/java/jdk1.8.0_131

export PATH=$JAVA_HOME/bin:$PATH

export CLASSPATH=.:$JAVA_HOME/lib/dt.jar:$JAVA_HOME/lib/tools.jar

 

保存后执行source /etc/profile

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值