【k8s故障处理篇】kubernetes集群中工作节点Noready故障处理

已于 2023-08-08 23:17:32 修改
阅读量2.2k 收藏 2
点赞数 3
分类专栏： Kubernetes从入门到精通 文章标签： kubernetes docker linux
于 2022-06-21 16:45:21 首次发布
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.youkuaiyun.com/jks212454/article/details/125393813
版权
本文详述了在k8s集群中遇到工作节点NotReady故障的排查和解决过程，从查看节点状态、检查master节点系统pod、分析node02节点日志，到确定是网络问题及由VMware强制关闭引发的故障。最终通过重启containerd和kubelet服务恢复正常。

摘要生成于 C知道 ，由 DeepSeek-R1 满血版支持， 前往体验 >

【k8s故障处理篇】kubernetes集群中工作节点Noready故障处理

一、查看故障情况

检查k8s集群的状态时，会发现k8s-node02 节点出现NotReady异常情况。

[root@k8s-master ~]# kubectl get nodes -owide
NAME         STATUS     ROLES                  AGE   VERSION   INTERNAL-IP     EXTERNAL-IP   OS-IMAGE                KERNEL-VERSION          CONTAINER-RUNTIME
k8s-master   Ready      control-plane,master   16h   v1.23.1   192.168.3.201   <none>        CentOS Linux 7 (Co
了解本专栏 订阅专栏 解锁全文 超级会员免费看
【K8S系列】Kubernetes node节点NotReady问题及解决方案详解【已解决】
颜淡慕潇
10-17 1万+
Kubernetes 集群中的每个节点都是运行容器化应用的基础。当节点状态显示为 `NotReady` 时，意味着该节点无法正常工作，这可能会导致 Pod 无法调度，从而影响整个应用的可用性。本文将深入分析节点不健康的各种原因、详细的排查步骤以及有效的解决方案。
【K8S问题系列 | 13】Kubernetes node节点NotReady问题【已解决】
颜淡慕潇
11-17 9470
Kubernetes 集群中的每个节点都是运行容器化应用的基础。当节点状态显示为 `NotReady` 时，意味着该节点无法正常工作，这可能会导致 Pod 无法调度，从而影响整个应用的可用性。本文将深入分析节点不健康的各种原因、详细的排查步骤以及有效的解决方案。
k8s集群node节点状态为Not Ready
q_hsolucky的博客
04-08 8961
k8s集群node节点状态为Not Ready的可能原因及处理方法
分析K8S中Node状态为`NotReady`问题
最新发布
海鸥
03-21 701
在Kubernetes（k8s）集群中，Node状态为NotReady通常意味着节点上存在某些问题，下面为你分析正常情况下节点应运行的容器以及解决NotReady状态的方法。
k8s节点为NotReady的常见原因
热门推荐
教Linux的李老师
02-25 1万+
k8s节点为NotReady的常见处理原因1: node节点的kubelet未启动原因2:没有安装cni插件 原因1: node节点的kubelet未启动 解决办法: systemctl enable --now kubelet 原因2:没有安装cni插件 解决办法: 安装cni插件
K8s节点频繁处于notready状态的解决办法
weixin_45912745的博客
11-30 9121
好好学习，天天向上！
k8s集群部署成功后某个节点突然出现notready状态的问题原因分析和解决办法
tigerhhzz的博客
12-24 2487
可能node03主机自身某种原因，出现宕机后重启，然后在 kubeadm init初始化后没有加入node03节点到集群中。由日志信息可知，报错原因是不能从/var/llib/kubelet/config.yaml下载到kubelet的配置。在master节点，重新生成token，然后尝试在node03问题节点上重新更新token。在node03节点运行一下代码：（尝试重新加入集群）此时查看node03 kubelet的状态。kubelet在node03节点成功运行。所有节点状态为ready，问题解决！
【K8S问题系列 | 4】Kubernetes node节点NotReady问题【已解决】
颜淡慕潇
11-08 7347
Kubernetes 集群中的每个节点都是运行容器化应用的基础。当节点状态显示为 `NotReady` 时，意味着该节点无法正常工作，这可能会导致 Pod 无法调度，从而影响整个应用的可用性。本文将深入分析节点不健康的各种原因、详细的排查步骤以及有效的解决方案。
【k8s故障处理篇】calico-node启动失败“Felix is not live: Get “http://localhost:9099/liveness” 解决办法(V1.30.3版本）
jks212454的博客
08-06 666
【k8s故障处理篇】calico-node启动失败“Felix is not live: Get “http://localhost:9099/liveness” 解决办法(V1.30.3版本）
K8S线上集群排查，实测排查Node节点NotReady异常状态
Tulipyx的博客
02-19 4509
一，文章简述 大家好，本篇是个人的第 2 篇文章。是关于在之前项目中，k8s 线上集群中 Node 节点状态变成 NotReady 状态，导致整个 Node 节点中容器停止服务后的问题排查。 文章中所描述的是本人在项目中线上环境实际解决的，那除了如何解决该问题，更重要的是如何去排查这个问题的起因。 关于 Node 节点不可用的 NotReady 状态，当时也是花了挺久的时间去排查的。 二，Pod 状态 在分析 NotReady 状态之前，我们首先需要了解在 k8s 中 Pod 的状态都有哪些。并且每个状态都
解决Kubernetes报错节点状态为NotReady，希望可以帮到你
weixin_73059729的博客
06-14 3943
使用kubeadm通过初始化安装的k8s是不包括网络插件的，也就是说初始化之后是不具备相关网络功能的，比如k8s-master节点上查看你节点信息是“Not Ready”状态、Pod的CoreDNS无法提供服服务。Flannel是一个轻量级的网络插件，基于虚拟网络的方式，使用了多种多端实现，如基于Overlay的VXLAN贺基于Host-Gateway的方式。
k8s-node节点一直not ready排查思路及解决办法
cnzzs的博客
08-21 2725
现象：登录后复制 [root@k8s-master ~]# kubectl get nodes NAME STATUS ROLES AGE VERSION k8s-master Ready control-plane,master 102m...
K8S-节点notReady如何处理？
tianqiuhao的博客
03-30 5350
K8S处理notReady，通过物理重启和kubeadmin重启两种方式，其中处理了hostname问题和br_netfilter问题。
在K8S中，节点状态notReady如何排查？
努力变的更强
01-01 968
在kubernetes集群中，当一个节点（Node）的状态变为NotReady时，意味着该节点可能无法运行Pod或不能正确相应kubernetes控制平面。排查NotReady。
K8s节点状态 NotReady排查
FLGB
08-19 2470
检查节点的网络连接，确保它能正常访问控制平面和其他节点。确保控制平面的关键组件（如 API Server、Controller Manager、Scheduler）正常运行，因为这些组件的问题也可能导致节点状态异常。状态可能是由于多种原因引起的，尤其是在资源过量分配（overcommitment）时，常见的原因包括节点资源（CPU、内存）不足、关键组件失败、磁盘压力等。首先，检查节点的资源使用情况，以确定是否由于资源过度使用导致节点不可用。可以看到节点内存、磁盘等信息状态都是未知的，初步怀疑节点状态已经。
k8s节点NotReady问题定位
gao547195592的博客
11-16 5987
有关k8s节点NotReady问题部分定位
k8s部署解成功解决node节点一直处于NotReady状态的问题，报错failed to load Kubelet config file /var/lib/kubelet/config.yaml
未来社会二十年发展的核心技术趋势由ABCD四个字母组成，分别是AI（人工智能）、BlockChain（区块链）、Cloud（云）、和Data（大数据）每一次进步都有新的认知和感触
05-06 1万+
k8s部署解决node节点一直处于NotReady状态的问题，报错failed to load Kubelet config file /var/lib/kubelet/config.yaml, error failed to read kubelet config file "/var/lib/kubelet/config.yaml", error: open /var/lib/kubelet/config.yaml: no such file or directory
kubeadm 安装k8s集群后，master和node节点notready问题解决方案
fenglei2020的博客
01-20 1812
使用kubeadm 安装k8s集群后，加载calico cni 网络组件后，master节点notready问题解决方案
解决K8S节点NotReady状态
过于丰富，无法简介
07-28 8196
k8s节点NotReady状态
k8s加入的node noready怎么解决
03-17
在 Kubernetes (k8s) 中，当节点（Node）状态显示为 NotReady 时，说明该节点无法正常工作或与集群失去联系。以下是排查和解决问题的一般步骤： --- ### **1. 检查节点状态** 运行以下命令查看节点的状态： ```bash kubectl get nodes ``` 如果某个节点状态为 `NotReady`，进一步详细检查其信息： ```bash kubectl describe node <nodename> ``` 通过此命令可以获取关于该节点的事件、Pod 分配情况以及资源使用状况等重要细节。 --- ### **2. 确认网络连通性** Kubernetes 的通信依赖于底层网络配置是否正确。需要确认以下几个方面： - 节点之间的网络连接是否通畅。 - kube-proxy 是否正常运行，并监听了正确的端口。 - 如果使用的是 CNI 插件（如 Flannel 或 Calico），需确保插件已安装并正确启动。 #### 排查方法： - 登录到出现问题的 Node 上，尝试 ping 其他节点 IP 地址； - 查看容器网络接口和服务 CIDR 配置是否有冲突； - 使用 `journalctl -u flanneld/calico.service` 来观察日志记录是否存在错误提示。 --- ### **3. 核实 Kubelet 和 Docker 运行状况** 每个节点上都有一个关键组件——kubelet，它负责管理 Pod 生命周期并与 Master 组件交互。此外还有容器引擎（比如 Docker）。若两者任何一个停止服务，则可能导致节点变为非就绪状态。 #### 解决方案包括： 1. 确保 kubelet 正常运行： ```bash systemctl status kubelet ``` 若未运行，可通过下面指令重启： ```bash systemctl restart kubelet ``` 2. 检验 docker 守护进程健康度： ```bash systemctl status docker ``` 同样地也可以直接重载 docker 以排除临时故障： ```bash systemctl restart docker ``` --- ### **4. 监控系统资源负载** 高 CPU/Memory 利用率可能会拖累整个系统的性能甚至引发崩溃，因此建议监控目标主机的各项指标数据，例如磁盘空间不足也可能导致异常发生。 #### 工具推荐： - Prometheus + Grafana 提供全面可视化分析能力； - Top/htop 做快速本地检测； 另外别忘了清理旧镜像释放存储空间哦！ --- **5. 更新及修复内核模块兼容性问题** 有时由于 Linux 内核版本过低或者某些特定功能缺失会造成不支持的情况。这时应当升级操作系统补丁包或者是替换掉有问题的核心驱动程序文件夹内容物后再测试一遍效果如何改善吧？ 最后再次同步时间服务器保持一致很重要噢～～ ---
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

江湖有缘

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付：¥1
获取中
扫码支付

您的余额不足，请更换扫码支付或充值

打赏作者

实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值