mapred.tasktracker.reduce.tasks.maximum设置为12,导致内存不足,reduce copy数据也很慢 (reduce > copy (971 of 1537 at 0.06 MB/s) >)
解决方法:减少mapred.tasktracker.reduce.tasks.maximum的数目
本文讨论了当mapred.tasktracker.reduce.tasks.maximum设置为12时出现的内存不足问题及reducecopy数据缓慢的情况,并提出了解决方案,即通过减少该参数的数值来改善问题。
mapred.tasktracker.reduce.tasks.maximum设置为12,导致内存不足,reduce copy数据也很慢 (reduce > copy (971 of 1537 at 0.06 MB/s) >)
解决方法:减少mapred.tasktracker.reduce.tasks.maximum的数目

被折叠的 条评论
为什么被折叠?