cloud__L-优快云博客

原创 hadoop2.4.1的伪分布环境搭建

使用的HDFS伪分布搭建修改配置文件etc/hadoop/hadoop-env.sh: JAVA_HOME=/usr/local/jdk1.7.0_45 修改配置文件etc/hadoop/core-site.xml: fs.defaultFS hdfs://crxy0:9000

2014-11-23 20:44:24 408

转载如何通过eclipse查看、阅读hadoop2.4源码

1.导入查看hadoop源码（1）选择Existing Projects into Workspace （2）选择源码路径（3）查看源码这样我们就完成了全部的内容。2.阅读hadoop源码其中比较常用的Open Call Hierarchy：用Open Call Hierarchy可以查看方法的调用层次。如

2014-11-23 19:25:33 1840

转载 win7如何安装maven、安装protoc

一、安装mvaven包1.首先我们下载maven包apache-maven-3.2.1.zip链接：http://pan.baidu.com/s/1jG9QhWa 密码：vmee2.配置maven（1）解压到E盘（2）进入环境变量（3）配置环境变量配置M2_HOME变量名：M

2014-11-23 19:24:56 718

转载从零教你如何获取hadoop2.4源码并使用eclipse关联hadoop2.4源码

我们如果想搞开发，研究源码对我们的帮助很大。不明白原理就如同黑盒子，遇到问题，我们也摸不着思路。所以这里交给大家一.如何获取源码二.如何关联源码一.如何获取源码1.下载hadoop的maven程序包（1）官网下载这里我们先从官网上下载maven包hadoop-2.4.0-src.tar.gz。官网下载地址对于不知道怎么去官网下载，可以查看：新手指导：

2014-11-23 19:20:09 541

转载 APACHE HADOOP YARN – 概念和应用

APACHE HADOOP YARN – 概念和应用如前面所描述的, YARN 实质上是管理分布式app的系统。他由一个中心ResourceManager来管理集群所有的可用资源，每个节点有一个 NodeManager, 直接从ResourceManager来负责管理单节点的可用资源。Resource Manager在YARN里, the ResourceManag

2014-11-21 15:19:26 679

转载 APACHE HADOOP YARN –背景和概述

APACHE HADOOP YARN –背景和概述庆祝重大的里程碑，Apache Hadoop YARN 被提升为Apache Hadoop在ASF的独立子项目，我们将开始系列blog的第一篇于Apache Hadoop YARN – 一个通用的，分布式的，app管理框架，取代Hadoop集群数据处理经典的Apache Hadoop MapReduce框架。MAPREDUCE –

2014-11-21 15:17:28 794