map slot 和 reduce slot

最新推荐文章于 2024-11-05 21:51:56 发布

lingzihan1215

最新推荐文章于 2024-11-05 21:51:56 发布

阅读量2.4k

点赞数 1

CC 4.0 BY-SA版权

文章标签： hadoop map slot reduce slot

本文链接：https://blog.youkuaiyun.com/lingzihan1215/article/details/8756071

本文介绍了Hadoop中关于TaskTracker的任务调度参数：mapred.tasktracker.reduce.tasks.maximum 和 mapred.tasktracker.map.tasks.maximum。这两个参数分别决定了每个TaskTracker上同时运行的Reduce任务和Map任务的最大数量。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

mapred.tasktracker.reduce.tasks.maximum	一个tasktracker同时运行reduce任务的最大个数，默认为2。集群Reducer任务槽数量 = 节点数 * 前者。
mapred.tasktracker.map.tasks.maximum	一个tasktracker同时运行map任务的最大个数，默认为2。集群map任务槽数量 = 节点数 * 前者。