本文档详细介绍了如何在Eclipse环境中配置Hadoop插件，并使用Hadoop-1.2.1自带的WordCount.java源代码运行MapReduce程序。首先，确保Hadoop集群已启动并运行。接着，为了兼容Hadoop-1.2.1，将Eclipse的JDK版本设置为1.7。然后，创建新的Map/Reduce项目，导入并修改WordCount.java源码，设置相关配置以指向Hadoop集群。最后，运行程序并在HDFS上查看输出结果。
Hadoop开发环境搭建-Eclipse插件配置 中成功搭建了用于编写和调试Hadoop应用程序的Eclipse+Hadoop plugin开发环境，接下来在Eclipse中编写一个Hadoop应用程序，并提交到Hadoop集群上运行。这里使用的源代码是Hadoop-1.2.1自带的用于单词计数的example程序。运行过程参考基于Eclipse的Hadoop应用开发环境配置
首先启动Hadoop集群，检查确保Master上的JobTrakcer和NameNode以及Slave上的TaskTracker和DataNode都已经正确启动了。
因为我的Linux安装的是JDK1.8, 版本过高，在导入Hadoop-1.2.1自带的WordCount.java源代码时会出错。因此在导入Hadoop自带的例子程序之前，Eclipse使用的JDK要设置为1.7版本，设置方法如下：
1、下载jdk7, 地址为http://download.oracle.com/otn-pub/java/jdk/7u60-b19/jdk-7u60-linux-x64.tar.gz
2、在用于Hadoop应用开发，安装Eclipse的主机上，将上面下载的jdk7解压到/usr/java/ 要在root身份下进行
3、切换到用户sunnie
最低0.47元/天 解锁文章
扫一扫
1034
被折叠的 条评论
为什么被折叠?
到【灌水乐园】发言
