hadoop笔记：一些问题和解决方法

一些问题和解决方法

从网上找到的答案，顺手做的笔记，没记下出处。

Q：执行hadoop -put 时报错：Name node is in safe mode.
A：hadoop dfsadmin -safemode leave

Q：reduce执行到16%或17%时停住不动，查看hadoop-{user}-jobtracker-{host}.log中有这样一条错误提示：Failed fetch notification #1 for map task:
A：在每台机器中的/etc/hosts中填写其它机器的ip和对应的主机名，不管在配置文件中写的是ip还是主机名。

Q：出现错误：File /user/hadoop/test could only be replicated to 0 nodes, instead of 1
A：停止hadoop，删除hdfs目录和/tmp/hadoop-{user}*和/tmp/hsperfdata_{user}/，重新格式化，然后重启hadoop服务。

Q：出现错误：org.apache.hadoop.util.DiskChecker$DiskErrorException: Could not find any valid local directory for ttprivate/taskTracker/hadoop/jobcache/job_201207301453_0036/jobToken
at org.apache.hadoop.fs.LocalDirAllocator$AllocatorPerContext.getLocalPathForWrite(LocalDirAllocator.java:381)
at org.apache.hadoop.fs.LocalDirAllocator.getLocalPathForWrite(LocalDirAllocator.java:146)
at org.apache.hadoop.fs.LocalDirAllocator.getLocalPathForWrite(LocalDirAllocator.java:127)
at org.apache.hadoop.mapred.TaskTracker.localizeJobTokenFile(TaskTracker.java:4271)
at org.apache.hadoop.mapred.TaskTracker.initializeJob(TaskTracker.java:1177)
at org.apache.hadoop.mapred.TaskTracker.localizeJob(TaskTracker.java:1118)
at org.apache.hadoop.mapred.TaskTracker$5.run(TaskTracker.java:2430)
at java.lang.Thread.run(Thread.java:636)
A：重启一下出问题的slave，不行的话同上操作

Q：Caused by: java.lang.OutOfMemoryError: Java heap space
A：修改conf/mapred-site.xml，修改mapred.child.java.opts的值为-Xmx512m或更大。