解决K8S集群kubelet故障：Failed to update stats for container && nable to determine device info for dir

最新推荐文章于 2025-03-17 18:50:43 发布
最新推荐文章于 2025-03-17 18:50:43 发布
阅读量3k 收藏 4
点赞数 7
分类专栏： 《Kubernets经典故障排查百例》 文章标签： kubelet docker 容器
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.youkuaiyun.com/weixin_44953658/article/details/125310238
版权
在Kubernetes集群中遇到kubelet组件频繁报错，问题关联到docker容器状态更新失败。解决方案包括清理docker系统资源并重启kubelet及docker服务。

摘要生成于 C知道 ，由 DeepSeek-R1 满血版支持， 前往体验 >

在检查k8S节点系统日志时发现，有大量的kubelet组件报错，报错内容如下：

Jun 16 09:51:37 master kubelet: W0616 09:51:37.076817    6997 container.go:549] Failed to update stats for container "/kubepods/besteffort/pod022cc533-14a1-43a8-932d-970d30a65f09/c786acf49e946d3a38d5ee1a095791bc5a76db1c23ecc10e20f68c9021b22faa": unable to determine device info for dir: /var/lib/docker/overlay2/837c03201884a6a631ae2137a099f6c217142857ac6e02dd6065de43f0b61342/diff: could not find device with major: 252, minor: 0 in cached partitions map, continuing to push stats

在这里插入图片描述
之前换过一次docker的数据目录，可能存在部分容器无法更新状态的情况，解决方法如下：
通过

了解本专栏 订阅专栏 解锁全文 超级会员免费看
出现E: Unable to locate package kubelet E: Unable to locate package kubeadm等解决方法
码农研究僧的博客
07-22 5239
安装包找不到，想起之前在centos安装yum源一样，更新yum源一个道理。本身是通过apt-get或者apt进行安装，则需要更新apt的源。添加阿里云的软件源（centos系统上添加yum源）对应也可看我这篇文章（更新yum源的一个文章）在apt-getinstallk8s的时候。官方的更新镜像源主要是外网的，（不适用）直接使用阿里云镜像源就可。............
Docker进入容器报：exec failed: unable to start container process: exec: “/bin/bash“ 解决
hkl_Forever的博客
09-04 5192
将 /bin/bash 换成 /bin/sh 执行方式，成功。制作镜像时使用了精简版，只装了sh命令，未安装bash。
IB Designables: Failed to update auto layout status: Failed to load designables from path (null)(实战)
qq_31379453的博客
11-09 2188
IB Designables: Failed to update auto layout status: Failed to load designables from path (null) CocosPods 问题 解决方法 ： 　　　　　　我把CocosPods降级了之后重新更新了 　　　　　　1， 卸载 cocoapods 　　　　　　　　$ sudo gem unins
Kubernetes报错Failed to get system container stats for “/system.slice/kubelet.service“
一别两宽丶各生欢喜
07-30 1791
kubernetes和docker版本兼容性问题 1、vim /etc/systemd/system/kubelet.service.d/10-kubeadm.conf 这是kubeadm部署模式的启动文件 2、找到对应的EnvironmentFile配置启动参数的文件 3、修改/etc/sysconfig/kubelet文件追加 KUBELET_EXTRA_ARGS=--runtime-cgroups=/systemd/system.slice --kubelet-cgroups=/systemd/sys
【Kubernetes】在Ubuntu24.04虚拟机上从零构建minikube
最新发布
mentalhealing的博客
03-17 1142
本人部署的Ubuntu24.04在VWware Workstation Pro 17.6.3上。
Kubernetes报错Failed to get system container stats for "/system.slice/kubelet.service"
vicsun2007的博客
09-01 1万+
k8s版本1.10.1 描述：在查看kubelet状态或是在查看日志时有以下错误 Failed to get system container stats for “/system.slice/kubelet.service”: failed to get cgroup stats for “/system.slice/kubelet.service”: failed to get con...
k8s: 创建pod时报错：mkdir /sys/fs/cgroup/cpuset/kubepods.slice/kubepods-besteffort.slice
amadeus_liu2的博客
07-06 9057
k8s
win10安装k8s
GodHao的博客
04-15 1958
title: “win10安装k8s” date: 2021-04-14T16:16:17+08:00 draft: true 安装工具 kind kind 让你能够在本地计算机上运行 Kubernetes。 kind 要求你安装并配置好 Docker。 kind 快速入门页面展示了 开始使用 kind 所需要完成的操作。 查看kind入门指南 minikube 与 kind 类似，minikube 是一个工具， 能让你在本地运行 Kubernetes。 minikube 在你本地的个人计算机（包括 W.
unable to create StreamExecutor for CUDA:0: failed initializing StreamExecutor for CUDA device...
bashan1604的博客
10-13 2286
环境 Ubuntu: 16.04 CUDA: 10.0 CUDNN: 7.6.5 执行情况 $ python3 test.py 2020-10-13 15:20:14.602211: I tensorflow/stream_executor/platform/default/dso_loader.cc:44] Successfully opened dynamic library libcuda.so.1 2020-10-13 15:20:14.605874: I tensorflow/strea
OSError Unable to load weights from pytorch checkpoint file for pytorch_model.bin解决方案
weixin_43178406的博客
07-07 6万+
 本文主要介绍了OSError Unable to load weights from pytorch checkpoint file for pytorch_model-00003-of-00003.bin解决方案，希望能对学习大模型的同学们有所帮助。 文章目录 1. 问题描述 2. 解决方案
K8S1.23.6版本详细安装教程以及错误解决方案（包括前置环境，使用部署工具kubeadm来引导集群）
学习笔记
09-07 2398
前面初始化主节点时提到的配置变化，这里需要注意，将下载的文件做一定的更改，与前面配置的ip相同，如果前面的ip（192.168.0.0）未更改则无需更改。如果上面的方式不行，请设置自定义的ip，也许是ip有冲突，就算是看不见冲突，也尝试改变一下，代替默认的ip，同时记得更改calico.yaml中的设置。此时需要在master节点中的calico配置文件中对应的位置加入下面的语句，然后重新安装calico插件，其中tun0代表的是自己的VPN网卡名称。当你怎么弄都不行的时候，请尝试所有机器执行以下命令。
2022-04-27 openshift集群kubelet中出现unable to fetch pod logs错误问题定位
悟世之路
04-27 2625
集群kubelet中出现unable to fetch pod logs错误 问题描述: 查看kubelet日志命令: journalctl -xefu kubelet 现象描述: http://cdp.cestc.cn/product/#/project/defect/list?projectId=1501448966260252673 release image：0.0.0-rc.1-20220425214427-20220426011558 kubelet ver...
kubelet启动报错
weixin_40548182的博客
02-22 2649
注释/etc/containerd/config.toml 文件中disabled_plugins = [“cri”]配置。场景：使用kubeasz部署kubernetes 1.26.0默认采用containerd运行时。重启containerd。启动kubelet失败。
Kubernetes(K8S)各种错误及解决方法
u010165147的博客
12-26 2万+
重要操作 1.设置内核 内核必须支持 memory and swap accounting，即要求如下配置 CONFIG_RESOURCE_COUNTERS=y CONFIG_MEMCG=y CONFIG_MEMCG_SWAP=y CONFIG_MEMCG_SWAP_ENABLED=y CONFIG_MEMCG_KMEM=y 查看内核支持 cat /boot/config-5.11.0-40-generic |grep MEMCG cat /boot/config-5.11.0-40-generic |g
K8S集群kubelet启动异常 kubelet.go:2267] node “node“ not found
热门推荐
Every Effort Counts
10-27 9万+
背景：这个问题是我在尝试部署openyurt的时候遇到的，同一个问题因人而异，具体排查请看自己的log，此篇仅供参考！ 问题 最近在尝试部署openyurt，需要先准备一个搭好的k8s集群来yurtctl convert，但是在node节点join集群的时候总是遇到问题： [root@node ~]# kubeadm join xxxxxxxx [preflight] Running pre-flight checks [preflight] Reading configuration from the.
kubelet升级到v1.24版本后服务拉起失败
Sebastien23的博客
03-18 723
k8s集群从1.23版本升级到1.24版本，升级完kubelet组件后，发现kubelet systemd服务拉起失败。修改下面的配置文件，去掉。
kubelet报错：Failed to get system container stats for “/system.slice/docker.service“
m0_51960729的博客
04-09 1022
阿里云ack集群的话可以在/etc/systemd/system/kubelet.service.d/10-kubeadm.conf中添加这两个环境变量。在/etc/systemd/system/kubelet.service中配置。：配置CPUAccounting、MemoryAccounting环境变量。系统：CentOS 7.4。
K8s全套快速入门
weixin_45565886的博客
05-19 1万+
K8s全套快速入门
k8s常见报错解决
贾文超的博客
01-20 1万+
【报错】 The Service "kubernetes-dashboard" is invalid: spec.ports[0].nodePort: Forbidden: may not be used when `type` is 'ClusterIP' 【原因】 如果在service中没有指定type类型，默认采用ClusterIP 【解决】 # prometheus-service.yaml --- spec: type: NodePort #加入 ports: - name:
nable to allocate 1.56 GiB for an array with shape (43, 4875387) and data type float64
05-30
这个错误提示意味着你的计算机内存不足以分配一个大小为(43, 4875387)的float64数组。你可以尝试减小数组的大小，或者增加计算机的内存容量来解决这个问题。如果你使用的是Python，你也可以考虑使用内存映射文件（memory-mapped files）来处理大型数组，这可以将数组的一部分存储在硬盘上，从而减轻内存压力。
评论 6
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

Jiangxl~

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付：¥1
获取中
扫码支付

您的余额不足，请更换扫码支付或充值

打赏作者

实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值