导入hadoop源码到eclipse

最新推荐文章于 2017-01-06 16:12:50 发布
原创 最新推荐文章于 2017-01-06 16:12:50 发布 · 459 阅读 · 0 ·
CC 4.0 BY-SA版权
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。

本文详细介绍了如何在Eclipse中搭建Hadoop开发环境，包括创建Java项目、配置源代码目录、导入必要的jar包及设置JRE等步骤。
1. 在eclipse中新建一个java project, 名字为hadoop(可任意命名)


2. 拷贝haoop目录下的core, hdfs, mapred三个文件夹到eclipse的src下


3. 调整hadoop/src下的目录结构
     右键项目hadoop -> Properties -> Java Build Path -> Source 
删除hadoop/src
Add Folders, 选中src下的core, hdfs, mapred三个目录

4. 导入依赖jar包
     右键项目hadoop -> Properties -> Java Build Path -> Libraries
Add External Jar, 分别添加以下位置jar， hadoop/lib/*.jar, hadoop/lib/jsp-2.1/*.jar, ant.jar
 
5. 修改JRE System Library
右键项目hadoop -> Properties -> Java Build Path -> Libraries
双击列表中的 JRE System Library, 打开Edit Library窗口
选中Alternate JRE, 配置成自己安装的jdk
hadoop 2.7.2 (hadoop2.x)使用ant制作eclipse插件hadoop-eclipse-plugin-2.7.2.jar
gao634209276的博客
05-10 5558
本文提供了关于hadoop2.7.2(其他版本一个道理)从ant制作eclipse的hadoop插件,到配置eclipse的hadoop,运行mr程序测试的一系类内容
Eclipse导入Hadoop源码
StormrageWang的专栏
03-02 2982
最近想详细学习下hadoop的源码，就想把源码导入到eclipse里，其实如何操作在发布的hadoop源码的build文件里面有详细的介绍，但是还是记录下，防止再踩坑。 准备工作 根据build.txt文件中的描述，安装必要的程序，可以参考http://blog.youkuaiyun.com/stormragewang/article/details/50291223中的步骤。 Build inst
Hadoop源码导入Eclipse
07-04 2959
需要进一步学习hadoop、需要看看内部源码实现，因此需要将hadoop源码导入都eclipse中，简单总结一下，具体步骤如下： 首先确保已经安装了git、maven3、protobuf2.5、如果没有安装需要提前安装一下 1、下载hadoop源码 git clone git://git.apache.org/hadoop-common.git 2、进入hadoop-common目录，
把hadoop源码导入到eclpse的java工程
haihongazar的博客
09-19 1064
在eclipse中阅读源码非常方便，利于我们平时的学习，下面讲述如何把hadoop源码导入到eclpse的java工程中。 解压源码 首先，我们在windows下使用winrar把hadoop-1.1.2.tar.gz解压，如图1所示 图1   我们关注文件夹src，浏览该文件夹，如图2所示 图2 我们需要这三个文件夹，一会我们会把这三个文件夹复制到eclipse中。 创建
eclipse中导入hadoop2.7.0源码
学习->分享->成长
05-06 3553
本文主要介绍了eclipse导入经过maven编译的hadoop2.7.0源码的步骤
hadoop源码导入到eclipse
kent_kent_kent的专栏
01-06 2704
1.版本说明 操作系统：ubantu16.04.1 Desktop hadoop：hadoop-2.7.3-src eclipse：java-neon 其他需要安装软件说明： jdk1.8    maven3.0.5   ProtocalBuffer-2.5.0 安装教程请参考我的另一篇博客：http://blog.youkuaiyun.com/blue_it/article/details/54
如何导入hadoop源码到eclipse
PacosonSWJTU的博客
06-06 1078
需要进一步学习hadoop、需要看看内部源码实现，因此需要将hadoop源码导入都eclipse中。简单总结一下，具体步骤如下：首先确保已经安装了git、maven3、protobuf2.5、如果没有安装需要提前安装一下0、preliminarylinux distribution(我的是 centos) Eclipse 4.3 JDK1.6.0_45 Maven 3.0.4 Protoco
eclipse 导入hadoop源码
杰哥He的博客
12-29 3775
下载hadoop源码 a.      进入hadoop的下载镜像地址进行下载 https://mirrors.tuna.tsinghua.edu.cn/apache/hadoop/common/  选择需要下载的版本 点击下载,下载后,解压(我解压到E盘下) 安装JDK(建议使用1.7版本) a.      如果已经有了jdk就可以跳过此步骤。 b.
Hadoop源码编译好的源码（eclipse可直接导入）
10-18
对于Eclipse用户，导入这个编译好的源码项目，可以便于进行代码阅读和调试，这对于理解Hadoop的工作原理、定制化开发或者排查问题非常有帮助。你可以通过Eclipse的"import->Existing Maven Projects"功能导入hadop-...
hadoop2.6.0源码和eclipse插件
11-24
插件提供了Hadoop项目的模板，可以快速导入Hadoop类库，并且能够直接连接到本地或远程的Hadoop集群，查看作业状态和日志。 使用这个插件的步骤通常包括： 1. 将`hadoop-eclipse-plugin-2.6.0.jar`添加到Eclipse的...
Hadoop2.7.3源码Eclipse工程
02-28
【标题】"Hadoop2.7.3源码Eclipse工程"揭示了这个压缩包包含的是Hadoop 2.7.3版本的源代码，并且是为Eclipse IDE准备的项目工程，便于开发者在Eclipse环境中进行源码级别的学习、调试和开发。 【描述】中的信息说明...
hadoop1.1.2 mapred-default.xml
calvin_kui的专栏
04-18 806
hadoop.job.history.location     If job tracker is static the history files are stored    in this single well known place. If No value is set here, by default,   it is in the local file system at
hadoop1.1.2 core-default.xml
calvin_kui的专栏
04-18 682
hadoop.tmp.dir   /tmp/hadoop-${user.name}   A base for other temporary directories.   hadoop.native.lib   true   Should native hadoop libraries, if present, be used.   hadoop.htt
Linux系统上hadoop1.1.2 eclipse插件编译
calvin_kui的专栏
04-21 597
环境： CentOS 6.5, Hadoop 1.1.2, Eclipse 4.4.2, Ant 1.9.4 一、 软件准备 1. 在CentOS上安装好Eclipse 2. 在CentOS上安装好Hadoop 3. 在CentOS上安装好Ant 本机安装软件目录如下： HADOOP_HOME=/home/hadoop/hadoop-1.1.2 ECLIPSE_HO
hadoop1.1.2 hdfs-default.xml
calvin_kui的专栏
04-18 569
dfs.namenode.logging.level   info   The logging level for dfs namenode. Other values are "dir"(trac e namespace mutations), "block"(trace block under/over replications and block creations/deletion
Hadoop集群完全分布式安装与配置
calvin_kui的专栏
04-19 557
环境： CentOS6.5, Hadoop1.1.2, jdk1.6 三台Linux虚拟机： 192.168.190.100: hostname:vm1 规划:master节点 192.168.190.101 hostname:vm2 规划:slave节点1 192.168.190.102 hostname:vm3 规划:slave节点2 一、配置hosts
使用hadoop RPC实现RPC调用
calvin_kui的专栏
04-18 520
环境： hadoop1.1.2 一、 定义服务提供的对象的接口, 此接口必须extends org.apache.hadoop.ipc.VersionedProtocol eg. import org.apache.hadoop.ipc.VersionedProtocol; /** * 业务接口, must extends VersionedProtocol * @autho
hdfs shell操作大全
calvin_kui的专栏
04-17 483
一、hadoop命令  #键入hadoop回车，查看使用帮助: Usage: hadoop [--config confdir] COMMAND where COMMAND is one of:   namenode -format     format the DFS filesystem   secondarynamenode    run the DFS secondary nam
评论
成就一亿技术人!
拼手气红包6.0元
还能输入1000个字符
 
红包 添加红包
表情包 插入表情
表情包 代码片
 条评论被折叠 查看
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值