
大数据
laodalinwenfu
这个作者很懒,什么都没留下…
展开
专栏收录文章
- 默认排序
- 最新发布
- 最早发布
- 最多阅读
- 最少阅读
-
Hadoop
笔记 Hadoop 转载自:http://www.cnblogs.com/elaron/archive/2013/06/20/3146429.html 今天有缘看到董西成写的《Hadoop技术内幕:深入解析MapReduce架构设计与实现原理》,翻了翻觉得是很有趣的而且把hadoop讲得很清晰书,就花了一下午的时间大致拜读了一下(仅浏览了感兴趣的部分,没有深入细节)。现把觉得有转载 2014-02-10 10:01:23 · 691 阅读 · 0 评论 -
Hadoop中Mapper类的setup()函数在什么地方调用
Hadoop中Mapper类的setup()函数在什么地方调用 分类: hadoop 装载自:http://blog.youkuaiyun.com/witsmakemen/article/details/8445133 经过跟踪hadoop源码发现,Mapper类的setup()函数在Mapper类的run()函数中被调用。 向hadoop提交job后,hadoop会在MapTas转载 2014-02-11 23:01:08 · 1444 阅读 · 0 评论 -
MapReduce:详解Shuffle过程
转载自:http://langyu.iteye.com/blog/992916 Shuffle过程是MapReduce的核心,也被称为奇迹发生的地方。要想理解MapReduce, Shuffle是必须要了解的。我看过很多相关的资料,但每次看完都云里雾里的绕着,很难理清大致的逻辑,反而越搅越混。前段时间在做MapReduce job 性能调优的工作,需要深入代码研究MapReduce的运行机制,转载 2014-02-12 20:31:09 · 744 阅读 · 0 评论 -
Redis入门篇
转载自:http://blog.youkuaiyun.com/freebird_lb/article/details/7733970 一、Redis简介: Redis(http://redis.io)是一款开源的、高性能的键-值存储(key-value store),它是用ANSI C来编写。Redis的项目名是Remote Dictionary Server的缩写,但它常被称作是一款数据结构服务器(转载 2014-08-24 15:45:53 · 670 阅读 · 0 评论