docker 容器进程被kill的原因查看

最新推荐文章于 2025-06-02 21:16:29 发布
原创 最新推荐文章于 2025-06-02 21:16:29 发布 · 1w 阅读 · 7 ·
CC 4.0 BY-SA版权
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。

本文记录了作者在Kubernetes集群中遇到的内存溢出问题，详细展示了如何通过dmesg命令查找被kill的进程及原因，包括Pod被驱赶和Docker容器被终止的过程，同时提供了检查内存使用情况的方法。

最近的docker容器经常被kill掉，k8s中该节点的pod也被驱赶，因而使用以下命令查看被kill的所有进程

dmesg | grep -i -B100 'killed process'

查看到pod被驱赶的原因：

[3899860.525793] Out of memory: Kill process 64058 (nvidia-device-p) score 999 or sacrifice child
[3899860.526961] Killed process 64058 (nvidia-device-p) total-vm:126548kB, anon-rss:2080kB, file-rss:0kB, shmem-rss:0kB

查看到docker容器被kill 的原因：

[3899859.737598] Out of memory: Kill process 27562 (jupyter-noteboo) score 1000 or sacrifice child
[3899859.738640] Killed process 27562 (jupyter-noteboo) total-vm:215864kB, anon-rss:45928kB, file-rss:0kB, shmem-rss:0kB

查看内存使用情况

tilyp@tilyp:~$ free -h
              total        used        free      shared  buff/cache   available
Mem:           251G         96G        114G        2.5M         41G        153G
Swap:            0B          0B          0B

 

4-Docker命令之docker kill
z19861216的博客
12-02 1417
4-Docker命令之docker kill
简述为什么有时Docker kill杀不死运行的容器？
最新发布
weixin_39291964的博客
07-23 208
Docker容器无法被终止的常见原因及解决方案：进程异常状态（D/Z状态）、Docker运行时故障（守护进程异常、存储驱动死锁、资源耗尽）和应用设计缺陷（信号处理不当、挂载点阻塞）。诊断方法包括检查进程状态和内核日志，解决方案涉及强制终止命令、资源清理和配置调整。预防措施需优化资源隔离、信号处理和健康检查机制，避免长I/O操作。根本原因是进程失控、运行时故障或应用缺陷，需针对性处理。
Docker kill 命令
时代各有不同，青春一脉相承。
11-24 1095
Docker kill 命令 docker kill：杀死一个或多个正在运行的容器。docker kill子命令会杀死一个或多个容器。容器内的主进程被发送SIGKILL信号（默认值），或者用--signal选项指定的信号。可以通过容器的ID、ID前缀或名称来引用容器。杀掉运行中的容器docker kill myProject
linux出现oom分析流程
chengwei_peng
08-12 7665
linux OOM 分析介绍
docker运行 killed
weixin_36845733的博客
08-25 369
我整理的一些关于【Docker】的项目学习资料（附讲解～～）和大家一起分享、学习一下：https://d.51cto.com/xltfovDocker 容器被杀死的处理指南 在现代软件开发中，Docker 的使用已成为一种普遍的现象。Docker 为开发者提供了一种轻量级的虚拟化方式，使应用程序能够在隔离的环境中运行。然...
docker运行程序Killed异常排查
静以修身，简以养德
06-02 990
摘要：开发者在封装Docker镜像后提交给客户的C++多线程程序出现不定时异常中断，发现存在"Killed"提示。经排查发现是Docker内存限制导致的问题。针对Windows版Docker Desktop的解决方案：1)通过docker stats监控资源使用；2)在Docker Desktop设置界面调整Resources中的内存限制(需考虑主机实际内存)，而非使用命令行参数。文中还提供了Docker Desktop的监控技巧，可通过容器界面直接查看实时资源使用情况。
Docker容器无法被stop or kill问题的解决方法
09-29
在实际操作中，还应注意Docker容器被kill后，如果进程没有正确结束，Docker可能会认为容器处于运行状态，尽管它实际上已经不再提供服务。因此，在处理容器问题时，同时观察容器进程和Docker容器的状态是很重要的。 ...
从 Linux 进程控制机制看 Docker 容器管理
云端梦留白的博客
07-08 1349
容器化技术以其轻量级、便携性和高度可扩展性，正在引领软件开发和运维的新潮流。Docker 作为容器化技术的先驱，其设计和实现深度依赖于 Linux 内核的 进程控制机制。这些机制不仅为 Docker 提供了 隔离性和 安全性的基础，还直接影响了容器的生命周期管理、资源分配和 进程调度。本文将简要探讨 Linux 进程控制机制对 Docker 容器进程管理的影响。
Docker学习：理论基础之Docker容器生命周期 | kill和 stop的区别与联系 | docker pause/ unpause
血煞长虹 的专栏
01-09 8617
一叶障目，不见泰山，我们就先从docker kill和docker stop、docker pause/ unpause 一叶，一叶的小细节开始，最后终可窥见泰山全貌，直至最后消灭容器，一切状态化为灰飞烟灭。
hadoop-yarn 排查集群docker 升级导致 container dead 原因
T_Janey
05-24 448
一、升级原因 在Docker 17.0.6版本中，由于docker hang死的bug，导致该物理机上的容器都有问题，以及hang 死后unknow host 异常 减少任务分配不上资源的现象 基于以上两个问题，做了以下升级：Docker 版本升级 17.0.6 -> 18.0.3 二、升级中遇到的问题 container 物理内存超 被kill 掉 连接异常 三、问题分析...
Mac 下使用 docker-compose 提示 killed:9 解决方案
极客点儿
07-29 3026
先吐槽一下，首先我搜索这个问题的时候太过雷同了，所有的方案都告诉你是内存不足，增加虚拟内存然后 Balabala 一大堆。。。结果呢？屁用没有！！！ 我出现这个问题是在执行 docker-compose up -d 来启动容器的时候突然就出现killed:9，就光敲这个命令也是这个错误。当时找到一篇博客说要重装（千万别用 pip 装，把你呃原生环境搞得一团乱）。我使用 brew 安装完以后发现还是不好使，然后就找了好久。 后来通过 type 命令找到 docker-compose 命令路径，删除后再使用 b
docker成产事故，向死而生。
谦190的博客
10-17 289
--------------------------------------------------------------------------------------------------------------------------- 容器即使是退出了，也能使用 docker  cp  <容器:/path>  <host:/path> 拷贝文件。 切记： 容...
Docker 理解进程（3）：为什么我在容器中的进程被强制杀死了？
小楼一夜听春雨，深巷明朝卖杏花
09-11 2387
今天我们来讲容器中 init 进程的最后一讲，为什么容器中的进程被强制杀死了。理解了这个问题，能够帮助你更好地管理进程，让容器中的进程可以 graceful shutdown。 我先给你说说，为什么进程管理中做到这点很重要。在实际生产环境中，我们有不少应用在退出的时候需要做一些清理工作，比如清理一些远端的链接，或者是清除一些本地的临时数据。 这样的清理工作，可以尽可能避免远端或者本地的错误发生，比如减少丢包等问题的出现。而这些退出清理的工作，通常是在 SIGTERM 这个信号用户注册的 handle..
Docker 容器内存：我的容器为什么被杀了？
weixin_46714004的博客
08-10 1490
我们从容器在系统中被杀的问题，学习了 OOM Killer 和 Memory Cgroup 这两个概念。OOM Killer 这个行为在 Linux 中很早就存在了，它其实是一种内存过载后的保护机制，通过牺牲个别的进程，来保证整个节点的内存不会被全部消耗掉。在 Cgroup 的概念出现后，Memory Cgroup 中每一个控制组可以对一组进程限制内存使用量，一旦所有进程使用内存的总量达到限制值，在缺省情况下，就会触发 OOM Killer，控制组里的“某个进程”就会被杀死。...
docker 里面的supervisord不断killed
weixin_30877493的博客
12-05 889
这个原因就一般是百度上大家说的，内存不足啦 但是死也得死个明白 用这个命令 dmesg | egrep -i -B100 'killed process' 看一下就知道了 我的是docker限制了内存的使用，导致killed 怎么知道docker 限制了多少内存呢 docker stats 一目了然 转载于:https://www.cnblogs.com/paiandlu/p/10071634....
查看进程被哪个进程杀掉(九十五)
Android系统攻城狮
12-05 1562
1.demo.c #include <unistd.h> #include <sys/syscall.h> #include <stdio.h> int main(){ pid_t tid; while(1){ sleep(1); tid = syscall(SYS_gettid); printf("tid(hex) = %#x, tid(dex) = %d\n",tid,tid); } } # gcc demo.c # ps aux | gre.
查看进程被谁杀
yunlianglinfeng的专栏
03-01 1688
方法1 systemtap： probe begin { printf("%-8s %-16s %-5s %-16s %6s %-16s\n", "SPID", "SNAME", "RPID", "RNAME", "SIGNUM", "SIGNAME") } probe signal.send { if (sig_name == @1 && sig_pid == target()) printf("%-8d %-16s %-5d %-16s %-6d ...
【JVM故障问题排查心得】「内存诊断系列」Docker容器经常被kill掉，k8s中该节点的pod也被驱赶，怎么分析？
世界上并没有完美的程序，但是我们并不因此而沮丧，因为写程序就是一个不断追求完美的过程。
12-14 6447
最近的docker容器经常被kill掉，k8s中该节点的pod也被驱赶。我有一个在主机中运行的Docker容器（也有在同一主机中运行的其他容器）。该Docker容器中的应用程序将会计算数据和流式处理，这可能会消耗大量内存。该容器会不时退出。我怀疑这是由于内存不足，但不是很确定。我需要找到根本原因的方法。那么有什么方法可以知道这个集装箱的死亡发生了什么？
关于java 程序运行在容器中频繁被杀
newbrid007的博客
04-17 448
测试 8个 kafka 数据 发送打满 大概总qps 2400多 cpu 占用 400% 基本满了 因为是容器 设定 4 核心 但是发现 内存疯狂增长 几秒就oom了 被容器杀死了，查看堆内内错发现GC健康 而且 老年代 基本都没怎用 为什么还会oom 然后就开启了漫长的gc日志查看 哎都是泪啊。目前临时解决 方案 java 设置堆内。突然灵光一闪 哎 java 的内存除了堆内还一堆堆外 然后一看 真的因为堆外 哎一言难进 所以java 不知道自己在容器中。
评论 4
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值