k8s自杀了，终于找到了凶手

最新推荐文章于 2025-06-12 15:25:00 发布
最新推荐文章于 2025-06-12 15:25:00 发布
阅读量1.4k 收藏
点赞数
CC 4.0 BY-SA版权
分类专栏： 分布式架构 k8s探险记 文章标签： k8s
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.youkuaiyun.com/wxb880114/article/details/86572146
本文介绍了k8s服务因磁盘空间满导致的问题，包括容器消失和服务响应慢。通过查询磁盘使用情况，发现问题源于/var/log/messages。解决方案是调整Docker日志驱动，改为json-file并设置日志路径，以及清理Docker日志以释放磁盘空间。

摘要生成于 C知道 ，由 DeepSeek-R1 满血版支持， 前往体验 >

问题概况

过了个周末，早上登上服务器，执行

kubectl get svc

等段时间抛出异常

在这里插入图片描述

查看docker运行情况

docker ps -a

在这里插入图片描述
发现 k8s 相关的容器都消失了

查询service状态

systemctl list-units --type=service |grep kube*

在这里插入图片描述
也是正常的，执行命令比较慢，有可能是磁盘比较满

查询磁盘使用情况

df -h

了解本专栏 订阅专栏 解锁全文 超级会员免费看
K8S篇之pod服务因空间资源不足问题而被驱逐Evicted问题
小橙子的笔记屋
06-16 168
修复pod异常因资源空间不足问题
【K8S系列】深入解析K8S中PV 和PVC
颜淡慕潇
04-20 1万+
在 Kubernetes 中，PV（持久卷）和 PVC（持久卷声明）之间的关系是一种动态匹配和绑定关系，用于实现 Pod 与存储资源的解耦。PV 和 PVC 之间的关系是一种动态的匹配和绑定关系，它们使得 Pod 与存储资源的具体实现解耦，提高了灵活性和可移植性。
记录一次 K8s pod 被杀的排查过程
lxw1844912514的博客
01-20 597
问题描述今天下午运维反馈说我们这一个pod一天重启了8次，需要排查下原因。一看Kiban日志，jvm没有抛出过任何错误，服务就直接重启了。显然是进程被直接杀了，初步判断是pod达到内存上限被K8s oomkill了。因为我们xmx和xsx设置的都是3G，而pod的内存上限设置的是6G，所以出现这种情况还挺诡异的。排查过程初步定位先找运维拉了一下pod的描述，关键信息在这里Containers: ...
K8S Pod状态为“被驱逐(evicted)”的解决方法
酒酿小圆子呀～
03-29 7564
在Kubernetes中，pod是最小的调度单元。当Pod无法在所分配的节点上正常运行时，它可能会被驱逐(evicted)。这种情况可能是由多种原因引起，比如节点资源不足、Pod超出了所分配的资源限制、镜像拉取失败等。
K8S节点出现Evicted状态“被驱逐”
杜小帅的博客
04-22 772
在中，Pod状态为“被驱逐（evicted）”表示Pod无法在当前节点上继续运行，已被集群从节点上移除。
k8s中Pod重启方法
xiaohuangren_123的博客
08-20 1万+
文章目录 一、有yaml文件的重启方式 二、没有yaml文件的重启方式 使用scale命令 直接删除Pod进行重启 使用“-o yaml”参数导出Pod模板并重建Pod【推荐】 总结 在使用 docker 的过程中，我们可以使用docker restart {container_id}来重启容器，但是在 kubernetes 中并没有重启命令（没有 kubectl restart {podname}），有时候我们的 Pod 出现 Bug意外终止，导致我们需要重启 Pod ，却没有一个很好的方式，特别是没有
[问题已处理]-k8s出现Evicted状态
爷来辣的博客
07-02 1130
导语：记录一下因为没有修改docker的路径 导致k8s出现Evicted pod状态如图 查看原因如下 需要扩容目录 或者迁移doker的目录。因为自己一开始扩容磁盘后忘记修改docker的目录了 不过还好不是正式环境。 ...
CentOS 7.9 最小化安装 kubernetes（k8s）1.25.3（免费下载）
11-23
在本教程中，我们将深入探讨如何在CentOS 7.9最小化安装环境中部署Kubernetes（简称k8s）版本1.25.3。Kubernetes是一个开源的容器编排系统，用于自动化容器化应用程序的部署、扩展和管理。CentOS作为一款稳定的Linux...
K8s（八）：如何进行 Kubernetes 集群健康检查？
✨ 欢迎来到【Seal ^_^ 的优快云博客】！✨
04-03 2万+
🔴 K8s（八）：如何进行 Kubernetes 集群健康检查？
【Jenkins+K8s】持续集成与交付 （二十）：K8s集群通过Deployment方式部署安装Jenkins
✨ 欢迎来到【Seal ^_^ 的优快云博客】！✨
06-11 2万+
本文将介绍如何在 Kubernetes 集群上安装和配置 Jenkins。
k8s pod Evicted状态问题解决
zb199738的博客
04-30 798
kubectl get po -n kube-system -o wide #查看pod运行状态信息 可以看到有两个状态为驱赶，一般是磁盘空间不足了， 清理slave磁盘空间后，状态正常
k8s中如何限制处于Evicted 状态的pod数量
m0_51960729的博客
01-22 391
在Kubernetes（k8s）集群的日常运维中，节点可能会因为磁盘或内存的压力触发kubelet的自动驱逐机制，从而导致pod被移除。将导致控制器不断尝试创建新的pod实例，而这些新实例随即又被kubelet驱逐，形成一个无休止的循环。这种情况下，不仅会产生大量处于“Evicted”状态的pod，还会增加集群的资源消耗与负载，进而影响到集群的管理和使用体验。组件的相关参数，来更有效地管理已终止（Terminated）pod的数量以及加快垃圾回收（GC）的速度。经过调研，发现可以通过调整。
k8s pod状态之Restarting详解
最新发布
abcy071213的博客
06-12 379
在 Kubernetes (k8s) 中，当你的 Pod 状态显示为 "Restarting" 时，这通常意味着 Pod 正在被重新启动。
非root用户运行容器（K8S SecurityContext）
小单的博客专栏
08-04 5466
一、从构建镜像的角度下手 将非root用户添加到Dockerfile # RUN命令执行创建用户和用户组（命令创建了一个用户newuser设定ID为5000，并指定了用户登录后使用的主目录和shell） RUN groupadd --gid 5000 newuser \ && useradd --home-dir /home/newuser --create-home --uid 5000 --gid 5000 --shell /bin/sh --skel /dev/null newus
k8s lifecycle——poststart和prestop
遇到问题写下来，为了以后方便查啊～
12-26 4779
k8s容器生命周期，poststart和prestop
遇到问题--k8s--pod的状态为evicted
热门推荐
直到世界的尽头
11-06 6万+
转载请注明出处：遇到问题–k8s–pod的状态为evicted 遇到问题 使用 kubectl get pods 发现很多pod的状态为evicted。 原因 eviction，即驱赶的意思，意思是当节点出现异常时，kubernetes将有相应的机制驱赶该节点上的Pod。 多见于资源不足时导致的驱赶。 更多详情参考 kubernetes的eviction机制 解决方案 排查资源和异常原因，防止新...
Kubernetes Pod的生命周期(Lifecycle)
祈晴小义
07-21 7247
文章目录Pod LifeclePod的阶段:Pod phase容器的状态:Container states容器的探针:Container probes重启策略：restartPolicy参考资料 Pod Lifecle Pod的阶段:Pod phase phase用于表示一个Pod处于其生命周期的哪个阶段，有且仅有以下5个可能的取值： Pending：Pod已经被k8s系统接受，但Pod中还有容器没有被创建。Pod被调度前和下载容器镜像的时候都处于这个阶段 Running：Pod已经被调度到Node上，所
k8s的健康性检查-Health Check
最美dee时光的博客
04-30 7468
1、k8s健康性检查的默认方式 k8s默认的健康检查机制：基于Dockerfile文件中的CMD或者ENTRYPOINT，如果进程退出时返回码为非零，则认为容器发生故障，k8s就会根据restartPolicy重启容器。 1）docker的restartPolicy有一下4种： always：（无论以什么码退出，docker daemon都会尝试重启退出的容器，手动停止后，策略不再生效）； ...
本地快速搭建K8s集群指南
本篇文章是关于k8s（Kubernetes）的初步探索，作者分享了自己在本地搭建简单k8s集群的经验。Kubernetes 是一个开源的容器编排系统，用于自动化容器应用的部署、扩展和管理。文章着重介绍了以下几个关键概念： 1. **...
评论 1
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

未来AI编程

共鸣===鼓励 打赏您随意

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付：¥1
获取中
扫码支付

您的余额不足，请更换扫码支付或充值

打赏作者

实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值