虚拟机k8s master意外关机后scheduler和controller-manager unhealthy

最新推荐文章于 2023-12-28 18:04:27 发布
原创 最新推荐文章于 2023-12-28 18:04:27 发布 · 511 阅读 · 1 ·
CC 4.0 BY-SA版权
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
文章标签：

#vim

当公司内网的Kubernetes(k8s)集群Master节点意外宕机后，发现scheduler和controller-manager状态不健康。解决方法是编辑/etc/kubernetes/manifests下的kube-scheduler.yaml和kube-controller-manager.yaml文件，注释掉port=0的参数，从而恢复这两个组件的正常运行。此操作可能与服务端口配置有关。

一次公司的内网测试k8s集群master意外宕机后

kubectl get cs

发现scheduler和controller-manager unhealthy
解决方案;

[root@k8smaster ~]# vim /etc/kubernetes/manifests/kube-controller-manager.yaml
[root@k8smaster ~]# vim /etc/kubernetes/manifests/kube-scheduler.yaml

需注释掉- --port=0这行参数
后即可（个人觉得本质上应该是改变scheduler和controller-manager的yaml文件就可以，这个port=0应该是影响不大的）

K8S二进制部署详解，一文教会你部署高可用K8S集群
景天科技苑
02-07 5659
虽然kubeadm方式搭建K8S比较简单，但是对里面的原理都不清楚的话，生产中使用功能可能不便于排查故障。二进制方式部署的k8s集群比较稳定。 二进制方式搭建：在官网下载相关组件的二进制包，如果手动安装，对kubernetes理解也会更全面。 Kubeadm和二进制都适合生产环境，在生产环境运行都很稳定，具体如何选择，可以根据实际项目进行评估。
ubuntu18.04搭建k8s(1.19.4)集群
没事学点AI小知识
03-01 1131
文章目录一. 配置详情二. 环境准备三.安装kubeadm，kubectl，kubelet四.部署Kubernetes Master五. Node节点加入集群 之前在centos os7搭建过单机版k8s 搭建单机版k8s(搭建过程中，不清楚的地方可以借鉴这篇博客，比较详细),最近工作比较轻松，于是在虚拟机上搭建了k8s集群，开始k8s的学习,特此记录搭建过程 . 一. 配置详情 Virtual Box 6.1 Ubuntu18.04 docker 20.10.4 k8s 1.19.4 主机名
k8s多master集群其中某台master宕机节点无法正常工作的问题
weixin_53790129的博客
07-29 1365
etcd 启动失败是由于 etcd 在 3 节点集群模式在启动却无法连接另外 2 台 master 节点的 etcd ，要解决这个问题需要改为单节点集群模式。，在 /etc/kubernetes/manifests/etcd.yaml 中给 etcd 命令加上这 2 个参数，并重启服务器后，master 节点就能正常运行了。运行 netstat -lntp 命令发现 kube-apiserver 根本没有运行，同时发现 etcd 与 kube-proxy 也没运行。
使用Kubeadm安装的K8s集群获取kube-scheduler和kube-controller-manager组件状态异常问题
非著名运维的博客
09-07 2535
报错：  使用Kubeadm安装的K8s集群获取kube-scheduler和kube-controller-manager组件状态异常，基本上都会出现这个问题。 [root@k8s-master ~]# kubectl get cs Warning: v1 ComponentStatus is deprecated in v1.19+ NAME STATUS MESSAGE
k8s组件状态异常:scheduler Unhealthy controller-manager Unhealthy排除
Q先生
03-24 534
【代码】k8s组件状态异常:scheduler Unhealthy controller-manager Unhealthy排除。
K8S组件scheduler和controller-manager报错：dial tcp 127.0.0.1:10252: connect: connection refused
W先生
07-27 4056
K8S组件scheduler和controller-manager报错：dial tcp 127.0.0.1:10252: connect: connection refused 解决
k8s踩坑2——scheduler 、controller-manager Unhealthy
weixin_42104154的博客
05-30 1076
查看master组件状态时出现错误 [root@k8s-master ~]# kubectl get cs Warning: v1 ComponentStatus is deprecated in v1.19+ NAME STATUS MESSAGE ERROR scheduler
搭建 K8S 环境:Centos7安装生产环境可用的K8S集群图文教程指南
极客星云-优快云博客
12-15 1901
本文分享了在Centos7系统上搭建生产可用K8S集群的详细教程。
K8S-Demo集群实践06：部署kube-apiserver到master节点（3个无状态实例）
jasonhe2018的博客
01-19 1008
K8S-Demo集群实践：部署kube-apiserver到master节点（3个无状态实例）一、下载并分发二进制文件到3个master节点二、创建加密配置文件三、创建并分发审计策略1、创建审计策略文件 audit-policy.yaml2、分发审计策略文件到3个master节点四、部署kube-apiserver服务1、创建kube-apiserver systemd unit模板文件2、分发kube-apiserver systemd unit文件到3个master节点3、启动kube-apiserve
在ubuntu18.04上安装和使用k8s集群
qq_51287641的博客
07-14 2939
在ubuntu18.04上安装和使用k8s集群一、配置虚拟机二、安装docker三、安装k8s1.关闭虚拟内存2.安装kubernetes3.设置开机启动4.查看`kubectl`版本四、配置k8s集群1.克隆两台虚拟机2.配置虚拟网络1）配置主节点2）配置每台机器的`/etc/netplan/50-cloud-init.yaml`问题一3）修改`/etc/hosts`4）重启3.配置Master节点1）使用`kubeadm init`进行初始化操作问题二问题三2）启动k8s3）查看启动状态问题四4.配置内
Kubernetes APIServer，Etcd，controller manager，scheduler 高可用原理
小楼一夜听春雨，深巷明朝卖杏花
07-20 2429
这两个月和博云合作的项目是要用于客户生产环境的，这个和我以前做的东西有很大的不同，所有基础架构必须给出高可用的解决方案。在这之前我只做过一些流量较小的用户产品或者一些原型项目，一开始基础架构都只给出了单节点的解决方案，结果被大师兄喷这个在生产环境根本不可用。不过事实确实是在一个真实的分布式系统中硬件损坏、进程崩溃、网络不通都可能直接导致系统不可用。...
K8S安装（三） kube-controller-manager组件安装
05-28 1783
Controller Manager简介 详细介绍请参考链接：Kubernetes组件之kube-controller-manager Controller Manager作为集群内部的管理控制中心，负责集群内的Node、Pod副本、服务端点（Endpoint）、命名空间（Namespace）、服务账号（ServiceAccount）、资源定额（ResourceQuota）的管理，当某个Node意外宕机时，Controller Manager会及时发现并执行自动化修复流程，确保集群始终处于预期的工作状态
k8s集群宕机之后，恢复集群
热爱学习的哈哈哈的博客
12-28 1183
昨天由于服务器重启导致的；我有多台master服务器，理论上k8s集群应该不会挂，可能同时重启所有master服务器，导致k8s集群无法正常运行。或者是服务器宕机之后，导致的k8s集群挂掉。
K8s集群重启与恢复-Master节点启停
热门推荐
临江仙我亦是行人
03-01 2万+
在实际工作中，可能某个 Master 节点需要维护，迁移，我们需要平滑的停止、启动该节点，尽量减少启停中对集群造成的影响
Kubernetes 集群 Master 节点启停
null
05-10 2192
说明 有时候某一台服务器需要关机或者维护，就需要停止上面的集群 master节点的停止前提是有多个master节点 停止节点 停止节点调度 # 等同于 kubectl uncordon <节点名称> 驱逐该节点上已有的资源调度到其他节点 # https://kubernetes.io/zh/docs/tasks/administer-cluster/safely-drain-node/ # https://kubernetes.io/docs/reference/generated/ku
【已解决】k8s controller-manager scheduler Unhealthy
qq_39545674的博客
12-05 3563
在ubuntu上使用kubeadm安装好k8s后，使用kubectl get cs 查看状态，发现controller-manager scheduler Unhealthy 解决方案 修改以下配置文件 /etc/kubernetes/manifests/kube-controller-manager.yaml /etc/kubernetes/manifests/kube-scheduler.yaml 将两个文件中的 - --port=0 这一行注释掉 这样就可以了，等一会在执行.
记一次虚机强制断电磁盘损坏导致 K8s 集群 部分节点未就绪(NotReady) 问题解决
山河已无恙
01-19 2276
自己的实验环境遇到，分享解决过程理解不足小伙伴帮忙指正我所渴求的，無非是將心中脫穎語出的本性付諸生活，為何竟如此艱難呢 ------赫尔曼·黑塞《德米安》
记录：k8s集群由于物理机非正常关机崩溃问题
m0_46673598的博客
10-28 2372
记录一次k8s集群异常退出导致宕机
k8s集群只一台节点，重启节点后命名空间找不到了
喝醉酒的小白
03-29 1130
如果您的Kubernetes集群只有一台节点，并且在重启节点之前您创建了一些命名空间和资源，那么在节点重启后，这些命名空间和资源可能会丢失。这是因为在Kubernetes中，资源和命名空间通常是存储在etcd中的。为了避免这种情况发生，建议您在Kubernetes集群中使用多个节点，以确保数据在不同节点之间的复制和备份。请注意，在Kubernetes中进行任何更改之前，请务必备份所有重要数据，以确保您能够在意外情况下快速恢复。请注意，在还原备份之前，请确保您已经停止了etcd实例。
k8s组件重启 kube-controller-manager和kube-scheduler
最新发布
06-17
### 如何重启 Kubernetes 中的 kube-controller-manager 和 kube-scheduler 组件 在 Kubernetes 集群中，`kube-controller-manager` 和 `kube-scheduler` 是两个关键的核心组件。它们通常以静态 Pod 的形式运行在主节点上，或者通过系统服务（如 systemd）管理。以下是关于如何重启这些组件的详细说明： #### 1. 如果使用静态 Pod 方式启动 当 `kube-controller-manager` 和 `kube-scheduler` 作为静态 Pod 运行时，它们的配置文件通常位于 `/etc/kubernetes/manifests/` 目录下。Kubernetes 的静态 Pod 机制会自动检测该目录中的配置文件变化，并重新启动对应的 Pod。 要重启这些组件，可以删除或修改其对应的静态 Pod 配置文件，例如： ```bash # 删除 kube-controller-manager 的静态 Pod 文件 mv /etc/kubernetes/manifests/kube-controller-manager.yaml /tmp/ sleep 5 # 等待几秒钟让 kubelet 移除旧的 Pod mv /tmp/kube-controller-manager.yaml /etc/kubernetes/manifests/ # 删除 kube-scheduler 的静态 Pod 文件 mv /etc/kubernetes/manifests/kube-scheduler.yaml /tmp/ sleep 5 # 等待几秒钟让 kubelet 移除旧的 Pod mv /tmp/kube-scheduler.yaml /etc/kubernetes/manifests/ ``` 这种方式会触发 kubelet 自动重新创建并启动这些 Pod[^1]。 #### 2. 如果使用 systemd 方式启动 如果 `kube-controller-manager` 和 `kube-scheduler` 是通过 systemd 管理的，则可以直接使用以下命令重启它们： ```bash # 重启 kube-controller-manager systemctl daemon-reload systemctl restart kube-controller-manager systemctl enable kube-controller-manager # 重启 kube-scheduler systemctl daemon-reload systemctl restart kube-scheduler systemctl enable kube-scheduler ``` 上述命令确保了服务被正确重新加载、重启，并设置了开机自启[^2]。 #### 3. 检查组件状态 无论使用哪种方式重启组件，都需要检查它们的状态以确保正常运行： ```bash # 检查 kube-controller-manager 的状态 systemctl status kube-controller-manager # 检查 kube-scheduler 的状态 systemctl status kube-scheduler # 或者通过 kubectl 查看静态 Pod 状态 kubectl get pods -n kube-system ``` #### 4. 手动调整证书和配置 如果需要对 `kube-controller-manager` 或 `kube-scheduler` 的配置进行修改（如更新证书），可以通过以下步骤完成： - 创建新的证书文件，例如使用 `cfssl` 工具生成证书[^3]。 - 更新相关的 `.kubeconfig` 文件。 - 修改 `/etc/kubernetes/manifests/` 中的静态 Pod 配置文件或 systemd 的服务配置文件。 #### 5. 处理监控相关问题 如果集群中集成了 Prometheus 并遇到与 `kube-controller-manager` 或 `kube-scheduler` 的监控相关问题，可能需要手动创建相应的 Service 资源。例如： ```yaml # kube-controller-manager-svc.yaml apiVersion: v1 kind: Service metadata: labels: app.kubernetes.io/name: kube-controller-manager name: kube-controller-manager namespace: kube-system spec: clusterIP: None ports: - name: https-metrics port: 10257 protocol: TCP targetPort: 10257 selector: component: kube-controller-manager sessionAffinity: None type: ClusterIP ``` ```yaml # kube-scheduler-svc.yaml apiVersion: v1 kind: Service metadata: labels: app.kubernetes.io/name: kube-scheduler name: kube-scheduler namespace: kube-system spec: clusterIP: None ports: - name: https-metrics port: 10259 protocol: TCP targetPort: 10259 selector: component: kube-scheduler sessionAffinity: None type: ClusterIP ``` 应用这些 Service 定义后，Prometheus 的 ServiceMonitor 将能够正确发现并抓取指标数据[^4]。 --- ###
评论
成就一亿技术人!
拼手气红包6.0元
还能输入1000个字符
 
红包 添加红包
表情包 插入表情
表情包 代码片
 条评论被折叠 查看
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值