linux(ubuntu)eclipse for hadoop开发环境搭建

本文介绍如何在非Hadoop集群的主机上搭建Eclipse开发环境,包括创建hadoop用户组、安装Eclipse及Hadoop插件、配置连接Hadoop集群的方法。

摘要生成于 C知道 ,由 DeepSeek-R1 满血版支持, 前往体验 >

如果你的开发环境不是hadoop集群中的主机,则需要在之外的主机上搭建开发环境,并配置,使得编写代码与测试代码方便进行。

步骤:

1. 新建hadoop用户组以及hadoop用户,可参照小编的其它博文

2. 安装eclipse(App中直接安装就好)

3. 将hadoop集群中的/opt/hadoop文件夹中的内容拷贝在本机电脑中的对应位置

注:hadoop文件中是解压缩并且配置好的hadoop文件,如有需要则对jdk等路径修改,可参照小编的其它博文

4. 下载hadoop插件,并将hadoop2x-eclipse-plugin-master/release下的3个.jar文件复制于插件文件夹中:

usr/lib/eclipse/dropins/sdk/plugins (安装eclipse的目录下)

hadoop-eclipse-kepler-plugin-2.2.0.jar,hadoop-eclipse-kepler-plugin-2.4.1.jar,hadoop-eclipse-plugin-2.6.0.jar

需要则:sudo chmod -R 777 /usr/share/eclipse/dropins/sdk/plugins

5. 重启eclipse,window->show view->map reduce locations

6. 配置map reduce locations,使得eclipse能够连接到hadoop集群

1) 在map reduce locations视图中右击,新建hadoop location

2) 填写map/reduce server, DFS master信息:

这样就可以了,有什么bug的话,需要根据提示信息来修改。

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值