linux下搭建hadoop环境步骤

本文提供Hadoop2.7.1版本的详细安装步骤及环境配置教程,涵盖JDK安装、环境变量设定、不同模式介绍及核心配置文件说明。

摘要生成于 C知道 ,由 DeepSeek-R1 满血版支持, 前往体验 >

1、下载hadoop包

wget http://apache.freelamp.com/hadoop/core/stable/hadoop-2.7.1.tar.gz

2、
tar xvzf hadoop-2.7.1.tar.gz
3、安装JDK,从oracle网站上直接下载JDK,地址:
http://www.oracle.com/technetwork/java/javase/downloads/index.html

4、chmod +x jjdk1.7.0_67.bin;./jdk1.7.0_67.bin,
当前目录下出现了jdk1.6.0_21目录

5、配置java环境变量 vi /etc/profile

export JAVA_HOME=/root/src/hadoop/jdk1.7.0_67
export CLASSPATH=$CLASSPATH:$JAVA_HOME/lib:$JAVA_HOME/jre/lib
export PATH=$PATH:$JAVA_HOME/bin

在终端下执行 source /etc/profile 使配置生效

6、可以用以下命令查看
显示JAVA版本 java -vesion

echo $JAVA_HOME
which java
echo $PATH
echo $CLASSPATH

如果java -version没有显示你的JDK的版本,请检查你的path的设置。

7、配置hadoop环境变量 vim /etc/profile

export HADOOP_INSTALL=/root/src/hadoop/hadoop-2.7.1
export PATH=$PATH:$HADOOP_INSTALL/bin

source /etc/profile 使配置生效

8、测试环境
hadoop version 显示

Hadoop 0.20.2
Subversion https://svn.apache.org/repos/asf/hadoop/common/branches/branch-2.7.1 -r 911707
Compiled by chrisdo on Fri Feb 19 08:07:34 UTC 2010

9、配置
hadoop每一个组件都使用一个XML文件配置,核心属性在core-site.xml中,HDFS属性在hdfs-site.xml中,MapReduce属性在mapred-site.xml中。这些文件都在conf子目录下。
hadoop有本地模式、伪分布模式和完全分布模式三种,默认配置为本地模式,没有守护进程,一切都运行在单个JVM上。




在这里插入图片描述

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值