is running beyond physical memory limits. Current usage: 2.0 GB of 2 GB physical memory used; 2.6 GB

最新推荐文章于 2023-09-03 17:14:37 发布

九师兄

最新推荐文章于 2023-09-03 17:14:37 发布

阅读量3.6k

点赞数 1

CC 4.0 BY-SA版权

分类专栏：大数据-KyLin(麒麟)

本文为博主九师兄（QQ:541711153 欢迎来探讨技术）原创文章，未经允许博主不允许转载。

本文链接：https://blog.youkuaiyun.com/qq_21383435/article/details/90245397

大数据-KyLin(麒麟) 专栏收录该内容

36 篇文章 ¥19.90 ¥99.00

订阅专栏

在执行Kylin任务时遇到内存溢出错误，显示使用了2.0 GB的2 GB物理内存。尽管集群看起来正常，但需要区分是map还是reduce阶段的问题。解决方法是调整mapreduce.map.memory.mb和mapreduce.reduce.memory.mb的设置，例如设置为2048MB。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

背景

在这里插入图片描述
执行一个kylin任务

在这里插入图片描述
然后报错

TaskAttempt killed because it ran on unusable nodekylin1.dtwave.dev.local:8041 Container released on a *lost* node


Container [pid=17923,containerID=container_1557923446198_0007_01_000010] is running beyond physical memory limits. 
Current usage: 3.5 GB of 3.5 GB physical memory used; 8.6 GB of 7.3 GB virtual memory used. 
Killing container. Dump of the process-tree for container_1557923446198_0007_01_000010 : 
|- PID PPID PGRPID SESSID CMD_NAME USER_MODE_TIME(MILLIS) SYSTEM_TIME(MILLIS) VMEM_USAGE(BYTES)

了解本专栏