
Hadoop源码分析
Chuck_lee
网站分析-hadooper-pythoner
展开
-
hadoop源码[0]-初衷和各种资源
初衷 一直业余的维护着一个hadoop应用程序,一直想看点hadoop源码,主要依据这篇博文(http://caibinbupt.iteye.com/blog/262412)的线索看下去,如果中途有自己感兴趣的就先散开看看. 原则以看代码为主,看别人的文章为辅,但是也不会很仔细的阅读每行代码,知道那些代码能干些什么事,以后遇到问题回来仔细查看,同时将自己看到过的资料记录下来,基本不会自原创 2014-08-11 15:49:53 · 785 阅读 · 0 评论 -
Hadoop源码分析[5]-counter的使用和默认counter的含义
在map和reduce的过程中,可以通过设置Context.setStatus()来随时设置状态,这个底层也是使用reporter来设置的 1.在0.20.x版本中使用counter很简单,直接定义即可,如无此counter,hadoop会自动添加此counter. Counter ct = context.getCounter("INPUT_WORDS", "count");原创 2014-08-11 15:46:14 · 948 阅读 · 0 评论