eclipse操作hadoop搭建环境

本文详细介绍了如何在Eclipse中搭建Hadoop环境。首先,将Hadoop安装包放入Eclipse的plugins目录,重启Eclipse后配置Hadoop安装路径。接着,通过Windows-Preferences设置Map/Reduce Locations,并在Linux中配置core-site.xml。然后,解决权限问题,通过修改/tmp目录的权限确保正常运行。最后,检查安装是否成功,当DFS Locations显示正常则表明配置完成。

摘要生成于 C知道 ,由 DeepSeek-R1 满血版支持, 前往体验 >

首先从Linux里将hadoop的架包拽出来,如图


放到eclipse安装目录下的plugins里即可。

重启eclipse,配置Hadoop installation directory

如果插件安装成功,打开Windows-Preferences后,输入刚才放hadoop的地址。

配置Map/Reduce Locations

打开Windows-->Open Perspective-->Other

选择Map/Reduce,点击OK,在右下方看到有个Map/Reduce Locations的图标


然后去Linux里找到:/etc/hadoop/2.5.0.0-1245/0    下找到core-site.xml,配置

fs.default.name                                                                      hdfs://name01:8020    name是跟hadoop对应的,端口号一般不用改

点击Map/Reduce Location选项卡,点击右边小象图标,打开Hadoop Location配置窗口:


根据自己ip更改。

点击"Finish"按钮,关闭窗口。点击左侧的DFSLocations—>myhadoop(上一步配置的location name),如能看到user,表示安装成功,但是进去看到报错信息:Error: Permission denied: user=root,access=READ_EXECUTE,inode="/tmp";hadoop:supergroup:drwx---------

应该是权限问题:把/tmp/目录下面所有的关于hadoop的文件夹设置成hadoop用户所有然后分配授予777权限。

cd /tmp/

chmod 777 /tmp/

chown -R hadoop.hadoop /tmp/hsperfdata_root

之后重新连接打开DFS Locations就显示正常了。



评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值