kubeadm 重置节点后在加入报etcd错误

原创 已于 2022-03-25 18:11:00 修改 · 1.7k 阅读 · 2 ·
CC 4.0 BY-SA版权
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
文章标签：

#kubernetes

于 2022-03-25 18:07:02 首次发布
本文介绍了解决 Kubernetes 中 ETCD 节点无法健康连接的问题。通过执行特定命令来检查和清理 ETCD 集群信息，并提供详细的步骤说明如何定位并修复 ETCD 节点列表中的异常节点。

1.报错：

在删除节点并kubeadm reset后，执行kubeadm 加入节点时候报错如下错误：

error execution phase check-etcd: etcd cluster is not healthy: failed to dial endpoint https://192.168.123.42:2379 with maintenance client: context deadline exceeded

 2.解决办法：

出现这个报错的原因是之前的etcd集群信息没有清理干净。  

  • 执行命令，查看etcd节点列表：

        # kubectl get pod -n kube-system

  • 进入etcd-worker-1容器内部：

        # kubectl exec -it etcd-worker-1 -n kube-system -- sh

  • k8s中etcd使用的是v3的api，所以要先声明变量：

        # export ETCDCTL_API=3

  • 查看当前etcd节点数量：

        # etcdctl --cacert="/etc/kubernetes/pki/etcd/ca.crt" --cert="/etc/kubernetes/pki/etcd/server.crt" --key="/etc/kubernetes/pki/etcd/server.key" member list

  • 删除报错的节点：

        # etcdctl --cacert="/etc/kubernetes/pki/etcd/ca.crt" --cert="/etc/kubernetes/pki/etcd/server.crt" --key="/etc/kubernetes/pki/etcd/server.key" member remove e4b7787f9db35781

kubeadm搭建的集群 check etcd错误
weixin_44946147的博客
05-24 1122
记录master加入高可用集群时etcd报错 报错信息如下： check-etcd] Checking that the etcd cluster is healthy error execution phase check-etcd: etcd cluster is not healthy: failed to dial endpoint https://192.168.1.11:2379 with maintenance client: context deadline exceeded To s
kubeadm加入master节点失败，报错 error execution phase check-etcd: etcd cluster is not healthy: context deadli
Extreme的博客
07-24 2899
出现这个报错，多是因为之前的集群信息没有清理干净。 解决办法如下： 执行命令，获取etcd节点列表。 kubectl get pod -n kube-system etcd节点名称为 “etcd”+hostname 这里以 etcd-k8s-master1 为例, 进入etcd容器内部 kubectl exec -ti etcd-k8s-master1 -n kube-system sh # k8s中etcd使用的是v3的api， 所以要先声明变量 export ETCDCTL_API=3 # 执行命令，
k8s集群恢复
weixin_49235157的博客
09-01 623
Kubernetes集群的恢复策略是保障环境稳定性的重要环节。备份与恢复功能仍不可或缺，主要原因包括应对误删除操作等。通过恢复策略。可以有效降低Kubernetes集群故障带来的风险，确保业务的连续性。下列是应对各种场景做出了恢复操作，以最快时间修复我们的k8s集群。
Kubernetes master无法加入etcd 集群解决方法
weixin_30254435的博客
09-11 3444
背景：一台master磁盘爆了导致k8s服务故障，重启之后死活kubelet起不来，于是老哥就想把它给reset掉重新join，接着出现如下报错提示是说etcd集群健康检查未通过： error execution phase check-etcd: error syncing endpoints with etc: dial tcp 172.31.182.152:2379: con...
Kubernetes(K8s) 使用kubeadm reset重置后 kubeadm init 失败的解决方法
weixin_42098295的博客
12-29 2272
本文主要介绍使用Kubernetes(K8s)时，在某些情况下，需要重新配置或重置现有的Kubernetes集群。使用kubeadm reset命令重置，使用 kubeadm init报错 [ERROR Port-2379]: Port 2379 is in use [ERROR Port-2380]: Port 2380 is in use [ERROR DirAvailable--var-lib-etcd]: /var/lib/etcd is not empty的解决方法。 原文地址：Kubernete
etcd节点故障无法启动
Dream_lei的博客
08-09 2625
实验环境突然有个etcd节点出问题了,研究了一下，以下是我的处理过程。
解决 Kubeadm 添加新 Master 节点到集群出现 ETCD 健康检查失败错误
hunheidaode的博客
06-29 5821
文章目录 一、问题描述 二、分析问题 1、查看集群节点列表 2、查看 Kubeadm 配置信息 3、分析问题所在及解决方案 三、解决问题 1、获取 Etcd 镜像列表 2、进入 Etcd 容器并删除节点信息 3、通过 kubeadm 命令再次尝试加入集群 !版权声明：本博客内容均为原创,每篇博文作为知识积累,写博不易,转载请注明出处。 系统环境： Docker 版本：19.03.8 Kubeadm 版本：1.17.4 Kubernetes 版本：1.17.4 ..
使用 kubeadm 创建高可用 Kubernetes 及外部 etcd 集群
SimonRiley的优快云博客
02-27 1353
Kubernetes 的官方中文文档内容全面，表达清晰，有大量示例和解析无论任何情况下都推荐先花几个小时通读官方文档，来了解配置过程中的可选项，以及可能会遇到哪些问题本文基于官方文档中入门 - 生产环境一章来整理部署流程Kubernetes 文档 | Kubernetes。
使用kubeadm重置k8s集群
qiao2458的博客
07-10 869
kubeadm重置k8s集群
07.kubernetes 集群维护-节点重置与重新加入
Anwen的博客
04-03 569
需硬件维护/系统升级的节点发生不可恢复故障的节点（如内核崩溃、磁盘损坏）Kubernetes 组件异常且无法修复的节点。
【问题解决】删除node节点后如何把node节点重新加入
嘻哈记的运维学习之路
02-21 1311
删除node节点后如何把node节点重新加入。
【Kubernetes】k8s删除master节点后重新加入集群
http://DBAtao.cn/
03-17 8553
master节点delete后，重新加入k8s集群？快和小涛试一试
k8s join 集群报错之error execution phase kubelet-start: error uploading crisocket:
red_sky_blue的专栏
03-02 7123
【问题描述1】 主节点上误删了/etc/kubernetes下的文件，当做kubeadm init的时候，找不到对应的key文件 invalid or incomplete external CA: failure loading key for apiserver: couldn't load the private key file /etc/kubernetes/pki/apiserver.key: open /etc/kubernetes/pki/apiserver.key: no suc..
k8s安装报错error execution phase wait-control-plane: couldn‘t initialize a Kubernetes cluster
m0_74226049的博客
01-28 3239
解决在使用docker安装k8s时的报错 Initial timeout of 40s passed. It seems like the kubelet isn't running or healthy. error execution phase wait-control-plane: couldn't initialize a Kubernetes cluster
k8s添加master节点报错处理问题
qq_38175373的博客
10-23 825
在现有集群master节点上，执行查看当前master节点etcd是否有k8s-master02相关的etcd。经查看没有k8s-master02相关的etcd pod。join之后，显示如下消息，就说明添加成功。然后重新回到k8s-master02节点。这样子就成功添加好master节点了哈。再任何一个master节点上使用命令。进入pod容器后，执行如下指令。再执行加入集群的的token。我们进入其中一个etcd。
k8s 1.25学习2 - 使用kubeadm部署单Master集群
12-11 1013
k8s 1.25学习
扩展 apiserver 连接认证 ip, apiserver证书更新
aifeier的博客
12-30 838
为 apiserver 的认证访问新增 ip
Rancher添加集群报错：Etcd Cluster is not healthy
weixin_44371927的博客
05-26 1313
有一台虚拟机在升级内核失败后，回滚至快照。但由于快照版本太老旧，和当前的rancher版本不匹配，服务器上的agent等需要清楚后，重新在rancher添加集群；但是只删除了rancher镜像以及agent相关容器，在添加之后连接失败，报错[etcd] Failed to bring up Etcd Plane: [etcd] Etcd Cluster is not healthy，查看etcd容器日志如下，百度之后找到原因：删除齐郡的适合需要把所有相关容器资源全部删除，需要执行以下操作。
【k8s】 etcd cluster is not healthy 将一个master控制节点踢出后重新加入集群发现报错
weixin_45066823的博客
09-01 1284
选项，提高日志等级就可以发现，提示刚刚踢出的master节点etcd无法连接。原因是master节点踢出后etcd集群并未将其踢出集群，需要我们手动进行移除。随便登陆一台现有的master机器并查看现有的etcd集群列表，果然其中还有那台已经退出集群的服务器10.0.1.81:2379。报错结果显示etcd集群运行不正常，其实在kubeadm join加入集群时打开。现在将这台服务器的etcd从集群中移除。移除之后，新节点就可以正常加入集群了。下载etcdctl命令行工具。...
重置kubeadm
最新发布
10-28
<think>嗯，用户这次的问题很明确，就是想了解重置kubeadm的具体方法。从引用内容看，用户已经查阅了站内关于kubeadm reset的相关文档，但需要更系统的操作指导。 用户可能正在管理一个Kubernetes集群，遇到了需要重置节点的情况。可能是初始化失败后需要重试，或是节点异常需要清理状态。ta引用三份资料的行为表明需要权威的操作步骤，特别是提到了worker节点重置这个容易被忽略的细节。 注意到引用[3]特别有价值，它区分了master和worker节点的不同操作流程。用户虽然没明说，但很可能需要完整的集群重置方案。因此回复要涵盖： 1 基础reset命令（所有节点通用） 2 master节点的额外清理（cordondrain节点） 3 worker节点的特殊处理（文件删除） 4 物理机和虚拟机环境的差异 需要强调几个关键点： - 必须清除的配置文件路径（/etc/kubernetes等） - 网络插件残留文件的不同处理（Flannel/Calico） - 最后重启的必要性 用户上次的问题涉及快速排序，这次转向Kubernetes运维，跨度很大。不过当前问题很聚焦，不需要关联历史。回复时要避免算法内容，专注系统操作。 安全方面要提醒备份重要数据，特别是/etc/kubernetes下的证书文件。虽然reset命令理论上不会碰其他目录，但保险起见还是应该提示风险。 最后考虑补充两个实用要点：一是reset命令的-f参数用于强制重置，二是kubeconfig文件的清理位置（~/.kube/config），这些在引用里没提但实际很重要。 </think>以下是**kubeadm重置集群的完整操作指南**，综合引用内容并补充关键细节： --- ### **重置步骤**（通用操作，所有节点均需执行） 1. **执行重置命令** ```bash kubeadm reset --force # 强制重置，跳过交互确认 ``` - 作用：清除`kubeadm init/join`创建的配置、证书及临时文件 [^2]。 2. **手动清理残留文件** ```bash sudo rm -rf \ /etc/kubernetes \ # 核心配置 /var/lib/kubelet \ # kubelet数据 /var/lib/etcd \ # etcd数据库 /etc/cni/net.d \ # CNI网络配置 $HOME/.kube/config # 用户kubeconfig ``` - 关键：彻底删除残留配置，避免重启后冲突 [^3]。 --- ### **差异化操作**（按节点角色） #### **Worker节点额外步骤** ```bash # 若使用Flannel网络插件 sudo rm -rf /run/flannel # 若使用Calico网络插件 sudo rm -rf /var/run/calico /var/lib/calico # 重启节点确保清理完全 sudo reboot ``` #### **Master节点额外步骤** 1. **驱逐并删除节点**（在任意Master执行） ```bash kubectl cordon <节点名> # 标记节点不可调度 kubectl drain <节点名> # 驱逐节点上所有Pod kubectl delete node <节点名> # 从集群移除节点 ``` 2. **清理ETCD数据**（单节点集群可跳过） ```bash sudo systemctl stop etcd sudo rm -rf /var/lib/etcd/member/ ``` --- ### **重置后检查清单** 1. 确认服务停止： ```bash sudo systemctl stop kubelet containerd ``` 2. 检查端口释放（尤其`6443`, `2379-2380`）： ```bash sudo ss -tulnp | grep -E '6443|2379|2380' ``` 3. **物理机环境**：需重启服务器确保内核释放资源 **虚拟机环境**：重启非必需，但建议执行。 > **注意**：重置后若需重新初始化集群，请使用 `kubeadm init` 并重新配置CNI网络插件 [^1][^3]。 --- ### **常见问题解决** - **问题**：重置后`kubelet`启动报错 **解决**：检查残留配置 `/var/lib/kubelet/config.yaml` 是否被清除。 - **问题**：节点重新加入集群失败 **解决**：确保所有节点已执行完整清理流程，特别是`/etc/kubernetes/pki`目录。 ---
评论
成就一亿技术人!
拼手气红包6.0元
还能输入1000个字符
 
红包 添加红包
表情包 插入表情
表情包 代码片
 条评论被折叠 查看
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值