hadoop2.7.2单机模式安装(win7无需cygwin)

本文安装环境概述:
windows7 64bit
jdk1.7.0_72 64bit
hadoop2.7.2

Hadoop从v2以后,单机模式已经可以在Windows上运行了,而且无需cygwin。而单机伪分布式模式理论上也是可以运行的,但是笔者在运行时遇到了形形色色的问题,所以这里就不讨论了。本文记录单机模式安装。

1.下载hadoop
[url]http://hadoop.apache.org/releases.html[/url]
下载hadoop-2.7.2.tar.gz,解压。比如我们解压到d盘。D:\opensource\hadoop\hadoop-2.7.2

2.配置环境变量
配置HADOOP_HOME,并将HADOOP_HOME\bin加入到PATH中。

3.Windows本地库下载
[url]https://github.com/sardetushar/hadooponwindows/tree/master/bin[/url]下载hadoop.dll和winutils.exe这2个文件(也可在本文附件处下载),拷贝到HADOOP_HOME\bin
注意这个hadoop.dll是64位的,而且对应hadoop2.7。如果你的系统不是64位或者hadoop不是2.7,那就不行了。

4.wordcount测试

这里测试[url=https://www.packtpub.com/big-data-and-business-intelligence/hadoop-mapreduce-v2-cookbook-second-edition]《Hadoop MapReduce v2 Cookbook》[/url]一书第一章的wordcount程序。


hadoop jar chapter1-2.0-SNAPSHOT.jar chapter1.WordCount wc-input wc-output


如果一切顺利,可以看到单词的统计出来了。

5.参考资料
[url]http://toodey.com/2015/08/10/hadoop-installation-on-windows-without-cygwin-in-10-mints/[/url]
评论 1
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值