hadoop
文章平均质量分 77
OOM_and_Exception
这个作者很懒,什么都没留下…
展开
专栏收录文章
- 默认排序
- 最新发布
- 最早发布
- 最多阅读
- 最少阅读
-
mapreduce的原理
yarn调度原理:说明: 客户端提交一个作业到Yarn上面的ResourceManager,ResourcerManager接收到请求后,为每一个job启动一个ApplicationMaster,AppcalitionMaster负责管理这个job,为这个job分配了applicationMaster后,由ApplicationMaster去请求ResourceManger申请资源,Reso原创 2017-08-11 16:35:10 · 431 阅读 · 2 评论 -
Hadoop读写过程的源码分析
读取过程 进入open(Path f, final int bufferSize)方法,该方法属于DistributedFileSystem类,在返回结果的时候,创建了一个FileSystemLinkResolver对象,并实现了此类的两个抽象方法, 最后调用了resolve()方法,其中doCall()方法和next()方法都在resolve()方法里用到了,只是next()方法只是在r原创 2017-08-18 10:57:56 · 723 阅读 · 0 评论
分享