hadoop运行中报错笔记

转载于 2019-07-22 17:38:58 发布 · 386 阅读

0 篇文章

订阅专栏

本文介绍了如何解决因YARN默认内存设置与实际可用内存不匹配而导致的InvalidResourceRequest异常问题。通过调整yarn-site.xml文件中的yarn.app.mapreduce.am.resource.mb属性值，可以有效解决该问题。

报错信息：
org.apache.hadoop.yarn.exceptions.InvalidResourceRequestException: Invalid resource request
报错图片：
在这里插入图片描述
解决办法：
yarn-site.xml文件中加上

<property>
        <name>yarn.app.mapreduce.am.resource.mb</name>
        <value>200</value>
</property>

报错原因：yarn默认是设置1.5G内存来运行任务，但是虚拟机内存太小，没有1.5G，要改小运行任务内存