Hadoop Failed fetch notification

 2012-09-26 15:19:46,964 INFO org.apache.hadoop.mapred.JobInProgress: Failed fetch notification #1 for task attempt_201209261435_0001_m_000000_0
2012-09-26 15:23:08,217 INFO org.apache.hadoop.mapred.JobInProgress: Failed fetch notification #2 for task attempt_201209261435_0001_m_000000_0

 

这个问题是发生在reduce阶段，而提示的消息应该是取不到map阶段的结果，既然在Failed fetch notification #1 for task attempt_201209261435_0001_m_000000_0中有取不到的任务分块的名字，说明namenode正常工作，namenode通知reduce节点进行reduce操作，而它却取不到，只能说明它没法和那些节点通信，又由于我在配置hadoop的时候用的是主机的名字，不是ip，所以想到解决办法应该是把各个datanode节点的映射互相加到/etc/hosts中。试了一下，果然正确。所以在此记录。