Windows环境下hadoop2.7.5和配置

目录

0.码仙励志

1.hadoop2.7.5下载

2.环境变量配置

3.确认hadoop配置的jdk的路径

4.复制文件到指定路径

5.hadoop核心配置文件

1.core-site.xml

2.mapred-site.xml

3.hdfs-site.xml

4.yarn-site.xml

6.格式化文件系统

7.启动hadoop服务


0.码仙励志

一件事如果想做,就早点下决心,拖一天纠结一天,早一天就多赚一天

1.hadoop2.7.5下载

打开下面的链接下载

微信搜索公众号码海无际或扫描左侧二维码回复c003获取,

如果不会请给我留言或者加QQ194760901找我索要

2.环境变量配置

下载好以后时下面的内容,我把它解压到了D盘

接下来开始配置环境变量,在这步之前请确保配置了java的环境变量,没有配置的话点下面的链接进行配置

 Windows系统jdk安装

新建HADOOP_HOME系统变量,变量值就是你的解压路径

找到系统变量Path,点击编辑

新建%HADOOP_HOME%\bin

Win7系统直接在后面输入

;%HADOOP_HOME%\bin

注意别丢了分号

3.确认hadoop配置的jdk的路径

首先找到我下面标记的文件

用记事本打开后找到我标记的那一行,把它修改成你jdk的安装路径

如果路径中有“Program Files”,则将Program Files改为 PROGRA~1

配置好上面所有操作后,win+R 输入cmd打开命令提示符,然后输入hadoop version,按回车,如果出现如图所示结果,则说明安装成功

4.复制文件到指定路径

在hadoop\bin目录下的winutils.exe和hadoop.dll复制到C:\Windows\System32目录下

5.hadoop核心配置文件

1.core-site.xml

 复制下面内容粘贴到<configuration></configuration>中最后并保存

<property>       
<name>fs.defaultFS</name>       
<value>hdfs://localhost:9000</value>   
</property>

2.mapred-site.xml

还是上面文件所在路径,有一个叫 mapred-site.xml.template的文件,把它复制并且重命名为mapred-site.xml

打开mapred-site.xml,复制下面内容粘贴到<configuration></configuration>中最后并保存

<property>       
<name>mapreduce.framework.name</name>       
<value>yarn</value>   
</property>

3.hdfs-site.xml

 还是上面文件所在路径,复制下面内容粘贴到<configuration></configuration>中最后并保存

<property>
<name>dfs.replication</name>
<value>1</value>
</property>

4.yarn-site.xml

 还是上面文件所在路径,复制下面内容粘贴到<configuration></configuration>中最后并保存

<property>
<name>yarn.nodemanager.aux-services</name>
<value>mapreduce_shuffle</value>
</property>
<property>
<name>yarn.nodemanager.aux-services.mapreduce.shuffle.class</name>
<value>org.apache.hadoop.mapred.ShuffleHandler</value>
</property>

6.格式化文件系统

打开dos命令窗口输入以下命令

hadoop namenode -format

出现下面内容说明成功

7.启动hadoop服务

首先进入hadoop所在的磁盘,比如在D盘,直接输入d:就可以,注意不要丢了冒号

然后进入hadoop的sbin目录下

接着输入start-all.cmd启动

然后会得到下面四张图

打开cmd输入jps可以看到: 

评论 1
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值