大数据入门（七）win10上eclipse使用Hadoop的配置

最新推荐文章于 2024-05-04 11:42:57 发布

33 Audrey

最新推荐文章于 2024-05-04 11:42:57 发布

阅读量567

点赞数 1

分类专栏：大数据从入门到“入门” 文章标签：大数据 java eclipse hadoop

本文链接：https://blog.youkuaiyun.com/qq_34391511/article/details/105066667

版权

大数据从入门到“入门” 专栏收录该内容

12 篇文章

订阅专栏

系列：
大数据入门（一）环境搭建，VMware15+CentOS8.1 配置
https://blog.youkuaiyun.com/qq_34391511/article/details/104874044
大数据入门（二）Centos8,JDK 配置
https://blog.youkuaiyun.com/qq_34391511/article/details/104893587
大数据入门（三）CentOS 网络配置
https://blog.youkuaiyun.com/qq_34391511/article/details/104895498
大数据入门（四）Hadoop 集群搭建
https://blog.youkuaiyun.com/qq_34391511/article/details/104885278
大数据入门（五）windows 上搭建单机版 Hadoop2.8（踩坑记录）
https://blog.youkuaiyun.com/qq_34391511/article/details/104948319
大数据入门（六）win10 对 Hadoop hdfs 的基本操作
https://blog.youkuaiyun.com/qq_34391511/article/details/105070955
大数据入门（八）win10 下的 wordcount
https://blog.youkuaiyun.com/qq_34391511/article/details/105073076
大数据入门（九）基于 win10 的 Hadoop，java 代码进行 hdfs 操作
https://blog.youkuaiyun.com/qq_34391511/article/details/105145380

工具

1、jdk1.8
2、hadoop2.8.3
3、hadoop-eclipse-plugin-2.8.5.jar
【获取hadoop2x-eclipse-plugin的可以参考(release文件夹下):https://github.com/DoubleBirdsU/Hadoop-eclipse-plugin】

eclipse的Hadoop环境配置

1、将hadoop-eclipse-plugin-2.8.5.jar，复制到eclipse安装目录下的plugins下。如：D:\ProgramFiles (x86)\eclipse\plugins
2、重启Eclipse。
3、点击菜单栏Windows —>Preferences ，如果插件安装成功，就会出现：在这里插入图片描述

如果没成功，首先查看版本是否正确。
其次可以，通过cmd到eclipse的目录下启动Eclipse：eclipse.exe -clean

4、选择，hadoop安装目录：D:\Learning\Hadoop\hadoop-2.8.5（这个是我自己的）
在这里插入图片描述
新建这个窗口只是为了可视化hdfs，操作方便，如果觉得不需要，可以跳过5这步，也可以通过网页查看hdfs：
查看集群状态：http://localhost:8088
查看Hadoop状态：http://localhost:50070/explorer.html#/
5、点击Windows —>Show View —>Others —>Map/Redure Location —>open,最下面就会出现这个：
在这里插入图片描述
点击Map/Redure Locations 窗口，空白处右键New Hadoop location :

这里会有报错，原因是hdfs 里面还没有input和output目录:

解决方法是创建input和output文件夹，下图是创建input的例子:

关于hdfs的基本操作可我的上一篇文章：大数据入门（六）win10对Hadoop hdfs的基本操作（传送门）