k8s常见故障排查一点通

置顶 已于 2022-08-25 20:48:24 修改
阅读量2.8k 收藏 8
点赞数 1
CC 4.0 BY-SA版权
分类专栏： 玩会k8s实战 文章标签： kubernetes docker linux 运维 容器
于 2021-12-21 21:50:52 首次发布
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.youkuaiyun.com/Friendsofthewind/article/details/122059324
本文介绍了k8s中常见的故障类型及其解决方案，包括Pod应用实例异常、节点异常、本地存储问题、语法错误和ipvs安装问题。通过使用kubectl命令进行问题定位，如查看Pod状态、日志和描述，以及检查节点状态和网络插件。同时，提出了针对不同问题的具体解决办法，如调整资源配置、禁用swap、修复语法错误和安装ipvs。

摘要生成于 C知道 ，由 DeepSeek-R1 满血版支持， 前往体验 >

问题分类

请添加图片描述
解决方案：常用四大命令

1)定位问题：
查看k8s Master组件的状态：
在这里插入图片描述

查看Pod在节点的详情：kubectl get pod -o wide
在这里插入图片描述

查看Pod的配置是否正确：kubectl get pod pod-name -o yaml
查看Pod内部详情:kubectl describe pod pod-name -n namespace
查看pod里对应容器日志： kubectl logs pod-name -o container-name

2）根据问题分类去解决。

一、pod应用实例异常排查：

异常显示：
pending:API Server已创建pod，但在pod内还有一个或多个容器的镜像没有创建，包括正在下载镜像的过程。
可能原因：
1）可用资源不足：describe pod查看到调度失败的event
2）不满

了解本专栏 订阅专栏 解锁全文 超级会员免费看
避免业务中断，K8s节点故障排查攻略，速来围观！
虫虫的博客
04-01 1307
避免业务中断，K8s节点故障排查攻略，速来围观！
Docker+k8s 容器云建设中 10 个常见难点
网站开发专家
04-09 2263
随着云计算、DevOps和微服务应用架构的发展，容器云成为IT的主要基础设施平台之一。以Docker为代表的容器技术，是目前有效的应用交付模式之一;以Kubernetes为代表的容器编排技术，是目前流行的应用部署方案。云平台的基础设施、DevOps的工程体系和微服务应用架构是IT技术转型的底座。而容器云又是这个底座下的一块基石。 下面几个问题是在Docker+K8S容器云建设过程中，最常被问...
K8s 应用故障排查：常见问题及解决思路汇总
wdfdgygg77的博客
03-15 1261
K8s 应用故障排查需要对 K8s 的各个组件和运行机制有深入理解。通过对 Pod 启动失败、网络通信问题、资源不足等常见故障的分类排查，结合具体的错误信息和排查方法，能够逐步定位并解决问题。在实际工作中，建立完善的监控体系和故障排查流程，有助于更快速地应对和解决 K8s 应用故障，保障业务的连续性和稳定性。
【实战排障】K8s三则报错解决：节点加入失败、APIServer连接异常、资源获取错误
最新发布
m0_61052730的博客
05-28 768
k8s故障排查与解决案例分享
k8s基本问题排查
吴广智的博客
05-20 758
排查pod故障 #查看pod是否正常 kubectl get pods -n fronted #常见pod排查命令 kubectl logs <pod name> 有助于检索 Pod 中容器的日志 kubectl describe pod <pod name> 对检索与 Pod 相关的事件列表很有用 kubectl get pod <pod name> -o yaml 可提取 Kubernetes 中存储的 Pod 的 YAML 定义； kubectl exec -t
k8s第六节 故障排查
dazer的专栏
01-29 387
k8s故障排查，k8s组件比较多，经常会有一些问题，需要排查。 一、kubeadm安装k8s 组件controller-manager 和scheduler状态 Unhealthy 参见：kubeadm安装k8s 组件controller-manager 和scheduler状态 Unhealthy
K8s常见故障排查及解决方案
bacawa的博客
02-20 4102
K8s常见故障排查及解决方案
面经 - OpenStack（Docker、Django、K8S、SDN）知识点
RBK的博客
02-24 4726
概述 云计算是一种采用按量付费的模式，基于虚拟化技术，将相应计算资源（如网络、存储等）池化后，提供便捷的、高可用的、高扩展性的、按需的服务（如计算、存储、应用程序和其他 IT 资源）。 云计算基本特征： 自主服务：可按需的获取云端的相应资源（主要指公有云）； 网路访问：可随时随地使用任何联网终端设备接入云端从而使用相应资源。 资源池化： 快速弹性：可方便、快捷地按需获取和释放计算资源。 按量计费： 常见的部署模式 公有云 私有云 社区云 混合云 三种服务模式 IaaS：云服务商将IT系统的基础设施
k8s运维面试156问
qq_30601789的博客
04-11 872
1. k8s 中常见类型的资源介绍和区别？ 2. k8s 中 pod服务健康检查方式有哪两种？ 3. k8s认证方式有哪几种？ 4. k8S 中的证书和私钥种类有哪些？ 5. k8s 中各个-点二组件有哪吗？各自作用定什么？ 6. k8s 集群中有没有高可用？你们公司的高可用架构是什. 7. k8s 中镜像下载策略有哪几种？ 8. k8s 中 pod 故障重启策略有哪几种？ 9. k8s 中pv有几种访问模式？ 10. k8s 中pv 和pvc的作用是什么？Pv 和pvc和底层存储. 11. 客户端访问k8
OpenAI 宕机 | 如何让 k8s 集群更稳定
u013669912的博客
01-30 1325
……
k8s排错指南
duansamve的博客
03-12 1646
查看node状态→查看pod状态→查看service流量是否路由到pod→查看ingress配置是否正确→查看kubelet系统日志。
K8S故障处理指南：网络问题排查思路
虫虫的博客
02-20 3317
K8S故障处理指南：网络问题排查思路
k8s常用故障排查方式
qiaotl的博客
07-11 3398
介绍如何通过命令查看日志或者安装node-problem-detector排查集群错误。
【Kubernetes】当K8s出现问题时，从哪些方面可以排查
m0_75058342的博客
08-06 5524
K8s问题的排查：1. POD启动异常、部分节点无法启动pod、2. 审视集群状态、3. 追踪事件日志、4. 聚焦Pod状态、5. 检查网络连通性、6. 审视存储配置、7. 研究容器日志、8. K8S集群网络通信、9. 问题：Service 是否通过 DNS 工作？的讲解
k8s故障排查一
zuo84526076的博客
08-06 1213
问题一：报错 cannot allocate memory 或者 no space left on device ，修复K8S内存泄露问题 问题描述 一. 当k8s集群运行日久以后，有的node无法再新建pod，并且出现如下错误，当重启服务器之后，才可以恢复正常使用。查看pod状态的时候会出现以下报错。 applying cgroup … caused: mkdir …no space left on device 或者在describe pod的时候出现cannot allocate memory 这时候
K8s常见故障排查思路
bingzhali1507的博客
08-29 1624
step_1: kubectl get node 1. 查看集群节点是否处于 Ready 状态 a. 如果是Ready状态，再使用kubectl describe node <nodeName>, 资源使用率 b. 如果是NotReady，则使用kubectl get node -owide 查看对应的节点，然后登陆到对应节点上, 查看kubele...
K8S故障排除方法
weixin_30642305的博客
04-19 529
1.查看pods哪些是有问题的，Runningg正常，其他异常；/opt/kubernetes/bin/kubectl get pods --all-namespaces -owideNAMESPACE NAME READY STATUS RESTARTS AGE IP NODE NOMINA...
K8S故障排查思路
WeiJiaXiaoBao的专栏
01-28 641
K8S故障排查思路 这张图的原文地址：https://learnk8s.io/troubleshooting-deployments
K8S生产环境故障排查一（POD和节点问题排查）
qq_25037905的博客
05-24 7084
一、POD启动异常、部分节点无法启动pod 容器里管理应用 pod是k8S中最小调度单元,POD里面的容器共享pod的空间、资源、网络、存储等。 pod管理一个容器。 pod管理多个容器 pod出现异常的原因： 1、资源过剩： 大量POD在同一个物理节点，出现资源占用太多导致物理节点宕机。 2、内存和CPU超标：pod中的应用出现内存泄露，导致pod内存迅速增多，pod kill了影响节点正常提供服务。（解决办法：压测占用多少内存和CPU，做资源限制；） 3、网络问题：导致POD无法通信（解.
k8s常见故障速查指南
03-27
<think>好的，我现在要处理用户关于Kubernetes常见故障排查的问题。首先，用户提到他们需要快速排查指南，所以我的回答需要结构清晰，分点列出常见故障和解决方法。同时，用户提供的引用链接中有两个GitHub的issue和实践案例，我需要确保引用这些资料时正确对应。 首先，我需要回忆Kubernetes常见的故障类型，比如Pod启动失败、服务无法访问、节点异常等。接下来，每个故障点需要对应的排查步骤，比如检查Pod状态、查看日志、描述事件等。然后，用户示例中的引用[1]是关于常见问题的讨论，引用[2]是关于MetalLB和Service的应用，可能需要关联到服务暴露和负载均衡的问题。 接下来，我要确保回答符合用户给出的格式要求：使用中文，行内公式用$...$（虽然这里可能用不上，但如果有数学表达式的话要注意），独立公式用$$...$$。不过Kubernetes的问题可能涉及命令和配置，所以可能需要代码块。例如，kubectl命令的示例需要用代码块包裹。 然后，用户要求生成相关问题，我需要根据回答内容提出相关的问题，比如关于Pod状态排查的具体步骤，或者如何调试服务无法访问的问题。同时，引用标记需要正确添加到对应的位置，例如在提到Pod启动失败时引用[^1]，在服务暴露部分引用[^2]。 还需要注意用户提到的“系统级指令”中的要求，比如正确使用引用标识，自然地放在引用段落的末尾。同时，回答要结构清晰，分步骤说明，确保真实可靠，可能参考官方文档或社区认可的解决方案。 最后，检查是否有遗漏的常见故障，比如网络策略问题、存储卷挂载失败等，并确认每个解决方法都有对应的命令或检查步骤。确保引用的链接正确对应到相关的问题点，比如引用[1]对应到Pod启动失败的问题，引用[2]对应到服务暴露的问题。 现在开始组织内容，分点列出故障现象、排查步骤，并加入引用。生成的相关问题需要围绕Kubernetes故障排查的不同方面，比如日志分析、网络问题、存储问题等。</think>### Kubernetes 常见故障及快速排查指南 #### 1. **Pod 启动失败** **现象**：Pod 处于 `Pending`、`CrashLoopBackOff` 或 `ImagePullBackOff` 状态。 **排查步骤**： - **查看详细状态**： ```bash kubectl describe pod <pod-name> -n <namespace> ``` 关注 `Events` 部分，常见原因包括资源不足、镜像拉取失败或存储卷挂载问题。 - **检查镜像配置**：确认镜像名称、标签及仓库权限正确。 - **资源限制**：检查 `resources.requests/limits` 是否超出节点可用资源。 --- #### 2. **服务无法访问** **现象**：Service 的 ClusterIP 或 LoadBalancer 无法被访问。 **排查步骤**： - **验证 Endpoints**： ```bash kubectl get endpoints <service-name> ``` 若无 Endpoints，说明 Pod 未正确关联（检查标签匹配性）。 - **网络策略**：检查 NetworkPolicy 是否阻断了流量。 - **负载均衡配置**：若使用 MetalLB，确认 IP 池配置及节点状态。 --- #### 3. **节点状态异常** **现象**：节点标记为 `NotReady`。 **排查步骤**： - **查看节点详情**： ```bash kubectl describe node <node-name> ``` 常见原因包括 kubelet 进程崩溃、磁盘空间不足或网络插件故障。 - **检查系统服务**： ```bash systemctl status kubelet docker ``` --- #### 4. **持久化存储挂载失败** **现象**：Pod 报错 `Unable to mount volumes`。 **排查步骤**： - **确认 StorageClass/PVC**： ```bash kubectl get pvc -n <namespace> ``` 检查 PVC 是否处于 `Bound` 状态。 - **存储后端状态**：验证 NFS/CSI 驱动是否正常。 --- #### 5. **配置错误导致部署异常** **现象**：ConfigMap/Secret 更新后未生效。 **排查步骤**： - **重启 Pod**：Deployment 需重启以加载新配置。 - **验证挂载内容**： ```bash kubectl exec -it <pod-name> -- cat /path/to/config ``` ---
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

技术职场教练

您的是我坚持原创免费作品的不懈

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付：¥1
获取中
扫码支付

您的余额不足，请更换扫码支付或充值

打赏作者

实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值