
yarn
流浮影
这个作者很懒,什么都没留下…
展开
专栏收录文章
- 默认排序
- 最新发布
- 最早发布
- 最多阅读
- 最少阅读
-
hadoop的组件yarn
hadoop的组件yarn YARN分布式资源管理框架: hadoop1.0 hadoop2.0 Scheduler :调度器(容量调度,公平调度。FIFO) container:资源容器(抽象概念) ApplicationsManager(job-submissions) negotion the frist container for executing the applicatio...原创 2019-09-20 16:06:20 · 739 阅读 · 0 评论 -
yarn的Scheduler
yarn的Scheduler 调度器 先进先出调度 hadoop1.x使用的默认调度器就是FIFO。FIFO采用队列方式将一个一个job任务按照时间先后顺序进行服务。比如排在最前面的job需要若干maptask和若干reducetask,当发现有空闲的服务器节点就分配给这个job,直到job执行完毕。 公平调度 公平调度器按资源池(pool)来组织作业,并把资源公平的分到这些资源池里。默认情...原创 2019-09-20 16:09:05 · 308 阅读 · 0 评论