hadoop-2.7.4-nodemanager无法启动问题解决方案

最新推荐文章于 2025-11-05 11:30:21 发布

原创

最新推荐文章于 2025-11-05 11:30:21 发布 · 3.5k 阅读

7 ·

CC 4.0 BY-SA版权

在尝试启动Hadoop 2.7.4的NodeManager时遇到"NodeManager doesn't satisfy minimum allocations"错误。经过一系列排查，发现在274版本的resourcemanager日志中，maximumAllocation值不正确。尽管尝试修改[yarn-site.xml]中的配置，问题仍未解决。最终，通过对比发现，可能是其他配置文件导致的问题。在默认配置文件[yarn-default.xml]中未发现异常，但怀疑存在另一个默认配置文件，其中的配置值与[yarn-default.xml]不同。同时，注意[core-default.xml]中两个废弃属性，需要删除或注释以避免报错。

近期新配了hadoop-274版本的集群，发现有一个小问题，DataNode无法顺利启动。
问题日志如下：

	resourcemanager_log
		2017-09-20 03:54:24,165 INFO org.apache.hadoop.yarn.server.resourcemanager.ResourceTrackerService:
		NodeManager from  ubuntu doesn't satisfy minimum allocations, 
		Sending SHUTDOWN signal to the NodeManager.
		
	nodemanager_log
		2017-09-20 03:54:24,228 ERROR org.apache.hadoop.yarn.server.nodemanager.NodeStatusUpdaterImpl: 
		Unexpected error starting NodeStatusUpdater
		Recieved SHUTDOWN signal from Resourcemanager ,Registration of NodeManager failed, 
		Message from ResourceManager: NodeManager from  ubuntu doesn't satisfy minimum allocations, 
		Sending SHUTDOWN signal to the NodeManager.

最后解决方案如下：

	在[yarn-site.xml]中添加如下属性：
		<property>
			<name>yarn.nodemanager.resource.cpu-vcores</name>
			<value>8</value>
		</property>
		<property>
			<name>yarn.nodemanager.reso