Pod 一直处于 Pending 状态

已于 2023-08-30 15:25:17 修改
阅读量8.6k 收藏 24
点赞数 7
分类专栏： K8s 文章标签： 运维
于 2022-04-26 19:06:24 首次发布
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.youkuaiyun.com/weixin_56477161/article/details/124434273
版权
本文详细介绍了当 Kubernetes 中的 Pod 一直处于 Pending 状态时，如何进行问题排查。内容包括检查节点资源不足、nodeSelector 和 affinity 配置、节点污点与容忍，以及可能的 kube-scheduler 问题。提供了相应的解决方法和命令示例，帮助管理员解决 Pod 调度问题。

摘要生成于 C知道 ，由 DeepSeek-R1 满血版支持， 前往体验 >

文章目录

一 现象描述

当 Pod 一直处于 Pending 状态时，说明该 Pod 还未被调度到某个节点上，需查看 Pod 分析问题原因。例如执行 kubectl describe pod 命令，则获取到的事件信息如下：

$ kubectl describe pod tikv-0
...
Events:
  Type     Reason            Age                 From               Message
  ----     ------            ----                ----               -------
  Warning  FailedScheduling  3m (x106 over 33m)  default-scheduler  0/4 nodes are available: 1 node(s) had no available volume zone, 2 Insufficient cpu, 3 Insufficient memory.

二 可能原因

  1. 节点资源不足
  2. 不满足 nodeSelector 与 affinity
  3. Node 存在 Pod 没有容忍的污点
  4. 低版本 kube-scheduler 的 bug
  5. kube-scheduler 未正常运行
  6. 驱逐后其他可用节点与当前节点的有状态应用不在相同可用区

三 排查方法

3.1 检查节点是否资源不足
3.1.1 问题分析

节点资源不足有以下几种情况：

  1. CPU 负载过高。
  2. 剩余可以被分配的内存不足。
  3. 剩余可用 GPU 数量不足（通常在机器学习场景、GPU 集群环境
最低0.47元/天 解锁文章
Kubernetes 疑难杂症系列：解决 Pod 一直处于 Pending 状态的终极指南
TechEnthusiast的博客
04-12 130
在深入排查之前，让我们先了解一下 Pod 的生命周期。当你创建一个新的 Pod 时，它会经历多个阶段：Pending → Running → Succeeded/Failed。Pending 状态意味着 Kubernetes 已经接受了 Pod 创建请求，但一个或多个容器尚未创建完成。这通常是因为 Kubernetes 调度器无法找到合适的节点来运行该 Pod。
K8S篇之Pod一直处于Pending状态原因解析
小橙子的笔记屋
11-09 5394
Pod一直处于Pending原因解析
Kubernetes中的Pod处于Pending状态的原因
虫虫的博客
03-28 2601
Kubernetes中的Pod处于Pending状态的原因
Linux常见服务与云原生运维常见服务报错与解决方案
1dea_Cao的博客
03-18 1441
日均处理日志量可达TB级。如果使用的是私有仓库，确保 Kubernetes 配置了正确的凭证（通过 Kubernetes Secret 或 Docker Config）。在 GitLab CI/CD 流水线中，推送镜像到 Docker registry 时，可能会遇到认证失败或推送超时的问题。优化 Dockerfile，避免频繁无变化的步骤，比如将频繁变化的命令移至 Dockerfile 的后面。确保 Dockerfile 中的路径、文件名和基础镜像都正确，并且必要的环境变量已正确配置。
如何解决Pod一直处于Pending状态的问题
笑纹的博客
06-22 5955
总的来说，当Pod一直处于Pending状态时，需要先检查Node节点状态、Pod资源请求和实际资源限制、节点资源利用率、API Server和调度器的状态等，进而确定问题的根本原因并进行相应的解决方案。使用kubectl命令可以帮助我们更好地诊断问题并进行修复。
Pod 一直处于Pending状态，可能的原因有哪些？
bltyu2000的博客
03-07 1259
Pod 一直处于 `Pending` 状态，可能的原因有哪些？
K8S部署的pod一直处于Pending状态问题解决
博客主要分享技术教程、工具教程、bug解决、前沿技术动态、编程经验、心得感悟等。 内容同步、干货获取、推广宣发请看侧栏推广信息
01-07 2680
每个人都有惰性，但不断学习是好好生活的根本，共勉！
K8S集群中Pod资源处于Pending状态排查思路
江晓龙的博客
06-14 9703
Pending状态表示挂起，处于该状态的原因有以下几点：处于Pending状态的原因最有可能的就是调度的Node节点上资源不足了。1）首先去排查节点的资源使用情况，使用命令查看内存的使用情况，命令查看系统的负载及CPU使用情况，查看磁盘的使用情况，快速定位是否是由于节点资源不足而引发的问题。如果资源充足，那么就可以排除是节点自身的问题了。2）被调度的节点可能存在污点配置，当K8S集群安装完成后，Master默认是开启污点的，开启污点的节点不允许被调度，可以进一步使用命令排查节点是否设置了污点操作，如果设置了
pod 排错----Pod 一直处于 Pending 状态
任我行的博客
03-24 1万+
Pending 状态说明 Pod 还没有被调度到某个节点上，需要看下 Pod 事件进一步判断原因，比如: ... Events: Type Reason Age From Message ---- ------ ---- ---- ...
【K8S系列】Kubernetes Pod节点Pending状态及解决方案详解【已解决】
颜淡慕潇
10-22 2万+
在 Kubernetes 中，Pod 的状态为 Pending 表示 Pod 已被创建，但尚未被调度到节点上，或者已调度到节点上但容器尚未开始运行。这一状态常常是因为某些条件未满足，导致 Pod 无法正常启动。以下是对 Pending 状态的详细分析及解决方案。
kubernetes的pod或instance一直处于pending状态的解决方案
热门推荐
little prince，blue coder
06-21 6万+
问题复现： 6台虚拟机上，kong组件（一个用于部署api服务的组件）副本数为4，总有一两个instance起不起来，一直处于pending状态，如下： 解决思路： 整体解决思路：pod -> instance -> DeamonSet -> ConfigMap 1、哪里有问题就进去干，话不多说，直接describe一下处于pending...
故障——pod状态为pending该如何解决
sea_bunch的博客
05-30 683
当您的虚拟机出现如下报错，您首先快照一下虚拟机如果仍然报错 首先进入任务管理器（Ctrl+Alt+Del）内，查看所有vmware是否都处在运行的状态，可能会跳出一个比较突兀的进程，需要把它删掉即可 然后打开运行对话框，输入Win+R，再输入services.msc查看所有的vmware是否都在运行状态，除了DHCP外
pod状态分析
qq_42325147的博客
07-10 969
比如，调度不成功(可以通过kubectl describe pod命令查看到当前Pod的事件，进而判断为什么没有调度)。2、Node恢复正常。1、镜像拉取失败，比如镜像地址配置错误、拉取不了国外镜像源（gcr.io)、私有镜像密钥配置错误、镜像太大导致拉取超E(可以适当调整kubelet的-image-pull-progress-deadline和-runtime-request-timeout选项)等。2、CNI网络错误，一般需要检查CNI网络插件的配置，比如:无法配置Pod 网络、无法分配IP地址。
彻底搞懂 K8S Pod Pending 故障原因及解决方案
xcbeyond|疯狂源自梦想，技术成就辉煌
05-04 3万+
点击上方“程序猿技术大咖”，关注并选择“设为星标”回复“加群”获取入群讨论资格！即使在高成熟度级别 Kubernetes 集群中 pod pending 也是无处不在。如果您随机询问任何使用 Kubernetes DevOps 工程师来确定折磨他们噩梦的最常见错误，pod pending 可能是非常常见的问题（可能仅次于 CrashLoopBackOff）。尝试推送更新并...
8种Kubernetes集群中Pod处于 Pending状态的故障排除方法
tigerhhzz的博客
03-20 1991
通过kubectl get pod -o yaml 查看pod的信息，其中status.phase字段表示该pod的阶段。pod中的容器地位均等且一同调度，在共享的上下文中运行。资源请求和限制：将节点上调度的所有 pod 的请求和限制总和与节点的可分配资源进行比较，以识别潜在的资源短缺。可分配与容量：了解差异；Pod 计数限制：除了 CPU 和内存之外，配额还可以限制 Pod 的数量，这可能是导致问题的原因。搜索 Pod 名称：按 Pod 名称过滤日志，以跟踪特定的调度尝试以及任何失败背后的原因。
kubernetes常见异常处理
happy_king_zi的博客
02-21 1333
kubernetes Pod异常状态的处理，网络问题，排查、定位思路
k8s报错：pod状态为pending，coredns的状态是pending的解决办法
baidu_38803985的博客
05-07 3万+
错误一：coredns的状态是pending 原因1：master上的flannel镜像拉取失败，导致获取不到解析的IP 解决方法： [root@master ~]# kubectl delete -f kube-flannel.yml #先删除安装的CNI插件 [root@master ~]# docker load --input flannel-0.11.0-amd64.tar #导...
pod一直pending状态，如何删除
最新发布
04-02
### 解决 Kubernetes Pod Pending 状态并删除 Pod 当一个 Pod 处于 `Pending` 状态时，通常是因为资源不足或其他配置错误引起的。以下是可能的原因以及解决方案： #### 原因分析 1. **节点资源不足** 如果集群中的节点缺乏足够的 CPU 或内存来调度新的 Pod，则该 Pod 将保持在 `Pending` 状态[^1]。 2. **存储卷绑定失败** 当使用 PersistentVolumeClaim (PVC) 时，如果 PVC 的 StorageClass 不匹配或者无法找到合适的 PV 进行绑定，也会导致 Pod 待机[^3]。 3. **镜像拉取失败** 配置文件中指定的 Docker 镜像不存在或权限设置不当可能导致容器初始化失败，从而进入 `Pending` 状态[^4]。 4. **调度策略冲突** 自定义调度规则（如 NodeSelector、Taints 和 Tolerations）可能会阻止某些 Pods 被分配到任何可用节点上[^2]。 #### 查看具体原因 可以运行以下命令查看详细的事件日志以诊断问题所在： ```bash kubectl describe pod <pod-name> ``` 此操作返回的信息包括但不限于最后尝试启动的时间戳、失败消息等内容。 #### 删除处于 Pending 状态下的 Pod 即使 Pod 没有成功运行起来也可以通过如下方式将其移除掉： ```bash kubectl delete pod <pod-name> --grace-period=0 --force ``` 上述指令利用了 `--force` 参数即时终止目标实例而不考虑优雅关闭周期，默认情况下后者为 30 秒超时期限。 另外需要注意的是，在实际环境中应谨慎对待强制性动作以免影响业务连续性和数据一致性。 ### 示例脚本 下面给出一段简单的 Bash Shell 脚本来自动化查找所有 stuck 在 pending phase 上面的对象并且清理它们。 ```bash #!/bin/bash for ns in $(kubectl get namespaces -o jsonpath='{range .items[*]}{.metadata.name}{"\n"}'); do for p in $(kubectl get pods -n $ns --field-selector=status.phase==Pending -o custom-columns=:metadata.name --no-headers);do echo Deleting pod "$p" from namespace "$ns" kubectl delete pod -n $ns $p --grace-period=0 --force; done done ```
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值