MapReduces1架构设计
hadoop1.x MR1 (计算+资源作业调度)
存在JobTracker和TaskTracker(map task+reduce task)两个进程,属于主从架构

JobTracker:
监控资源和作业调度,通过心跳监控所有TaskTracker和job健康状况
告诉调度器踪任务使用资源使用情况
TaskTracker:
负责接收和执行JobTracker发送的命令
将节点资源使用情况和任务情况汇报JobTracker
TaskScheduler:
任务调度器(FIFO原则 先出先出,根据作业优先 时间先手顺序执行)
hadoop1.x MR1 (计算+资源作业调度)
存在JobTracker和TaskTracker(map task+reduce task)两个进程,属于主从架构

JobTracker:
监控资源和作业调度,通过心跳监控所有TaskTracker和job健康状况
告诉调度器踪任务使用资源使用情况
TaskTracker:
负责接收和执行JobTracker发送的命令
将节点资源使用情况和任务情况汇报JobTracker
TaskScheduler:
任务调度器(FIFO原则 先出先出,根据作业优先 时间先手顺序执行)
来自 “ ITPUB博客 ” ,链接:http://blog.itpub.net/31441024/viewspace-2155250/,如需转载,请注明出处,否则将追究法律责任。
转载于:http://blog.itpub.net/31441024/viewspace-2155250/
本文深入探讨了Hadoop 1.x中MapReduce v1(MR1)的架构设计,介绍了JobTracker和TaskTracker两个核心组件的功能及交互方式,并解析了任务调度器的工作原理。

5943

被折叠的 条评论
为什么被折叠?



