hadoop 安装与环境搭建

本文详细介绍如何在单机环境下安装配置Hadoop,包括下载指定版本的Hadoop、解压缩并移动到目标文件夹、修改配置文件等内容。

摘要生成于 C知道 ,由 DeepSeek-R1 满血版支持, 前往体验 >

这篇已经太老了,请点击:点击打开链接

1. 在终端使用  wget +"hadoop 下载地址",下载安装包。(配合慕课网教程使用体验更好)

hadoop-1.2.1.tar.gz              下载地址:http://mirrors.hust.edu.cn/apache/hadoop/common/hadoop-1.2.1/hadoop-1.2.1.tar.gz

hadoop-3.0.0-alpha1.tar.gz 下载地址:http://mirrors.hust.edu.cn/apache/hadoop/common/hadoop-3.0.0-alpha1/hadoop-3.0.0-alpha1.tar.gz

2. 使用tar -zxvf解压缩。并且移动至自己的目标文件夹, 例如 mv hadoop-1.2.1  /opt

3. 打开文件夹 /opt/hadoop-1.2.1/conf 使用 ls 查看此文件夹下的文件,这儿我们要修改四个文件。

4. 第一个,vim hadoop-env.sh   修改JAVA_HOME与 jdk 中环境变量JAVA_HOME保持一致。记得去掉前面"#" 号。

5. 第二个,vim core-site.xml      修改如下:


要添加的代码如下:

   <property>
         <name>hadooop.tmp.dir</name>
         <value>/hadooop</value>
    </property>
   <property>
         <name>dfs.name.dir</name>
         <value>/hadoop/name</value>
    </property>
   <property>
         <name>fs.default.name</name>
         <value>hdfs://VM-44-213-ubuntu:9000</value>
    </property>

//VM-44-213-ubuntu是自己的机器名称 要改为自己的。

6. 第三个,vim hdfs-site.xml  修改如下:


具体要添加代码:

   <property>
         <name>dfs.data.dir</name>
         <value>/hadoop/data</value>
         <description></description>
    </property>

7. 第四个,vim mapred-site.xml 修改如下:


具体添加代码:

   <property>
         <name>mapred.job.tracker</name>
         <value>VM-44-213-ubu
ntu:9001<value>
         <description></description>
    </property>
   

//VM-44-213-ubuntu是自己的机器名称 要改自己的。

至此四个文件修改完成。

8. 修改环境变量,添加HADOOP_HOME,并且在PATH中添加HADOOP_HOME,修改如下:


9. 最后一步使用 source /etc/profile 使得配置生效。

10. 此时便可使用 hadoop 命令检测是否配置成功。

11. 如有错误,请留言指导。

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值