hadoop Container [] is running 255195648B beyond the ‘VIRTUAL‘ memory limit

最新推荐文章于 2024-06-27 12:58:57 发布

原创最新推荐文章于 2024-06-27 12:58:57 发布 · 313 阅读

0 ·

CC 4.0 BY-SA版权

文章标签：

#hadoop

hadoop 专栏收录该内容

1 篇文章

订阅专栏

在学习Hadoop过程中遇到内存限制问题，1G1核的虚拟机配置导致了'VIRTUAL'memorylimit超出。为了解决这个问题，可以在yarn.xml配置文件中设置两个属性：yarn.nodemanager.vmem-check-enabled设为false禁用虚拟内存检查，以及调整yarn.nodemanager.vmem-pmem-ratio为4，即虚拟内存与物理内存的比例。这样可以允许容器使用更多的虚拟内存，以适应资源有限的环境。

学习hadoop时出现了hadoop Container [] is running 255195648B beyond the ‘VIRTUAL’ memory limit的问题
环境：1G1核的虚拟机。。。

参考

在yarn.xml中添加以下属性

<property>
  <name>yarn.nodemanager.vmem-check-enabled</name>
   <value>false</value>
   <description>Whether virtual memory limits will be enforced for containers</description>
 </property>
<property>
  <name>yarn.nodemanager.vmem-pmem-ratio</name>
   <value>4</value>
   <description>Ratio between virtual memory to physical memory when setting memory limits for containers</description>
 </property>