Hadoop(1)

最新推荐文章于 2024-06-30 17:10:23 发布

wonder4

最新推荐文章于 2024-06-30 17:10:23 发布

阅读量3.9k

点赞数

CC 4.0 BY-SA版权

分类专栏：更新

本文链接：https://blog.youkuaiyun.com/wonder4/article/details/51799188

更新专栏收录该内容

70 篇文章

订阅专栏

本文介绍了Hadoop集群中常见的几个问题及其解决方案，包括ResourceManager配置、MapReduce内存设置、连接重试及安全模式下的文件删除等问题。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

常见问题:

1.ResourceManager不能为0.0.0.0，见wiki，如果有这种情况可以设置yarn-site.xml

<property>
<name>yarn.resourcemanager.address</name>
<value>master:8032</value>
</property>
<property>
<name>yarn.resourcemanager.scheduler.address</name>
<value>master:8030</value>
</property>
<property>
<name>yarn.resourcemanager.resource-tracker.address</name>
<value>master:8031</value>
</property>

2.设置mapreduce的内存，在mapred-site.xml

<property>
<name>mapred.child.java.opts</name>
<value>-Xmx512m</value>

</property>

3.重复尝试连接，16/07/01 10:11:34 INFO ipc.Client: Retrying connect to server: localhost/127.0.0.1:8032. Already tried 6 time(s); retry policy is RetryUpToMaximumCountWithFixedSleep(maxRetries=10, sleepTime=1000 MILLISECONDS)

检查jps，查看是否yarn没有启动

4.异常中断后，org.apache.Hadoop.dfs.SafeModeException: Cannot delete /user/hadoop/input. Name node is in safe mode ，处于安全模式

bin/hadoop dfsadmin -safemode leave

bin/hadoop dfsadmin -safemode enter 打开安全模式