etcd数据迁移实战

最新推荐文章于 2025-09-03 12:16:57 发布

原创

最新推荐文章于 2025-09-03 12:16:57 发布 · 3.6k 阅读

0 ·

CC 4.0 BY-SA版权

文章标签：

#etcd

本文详细记录了etcd数据从旧服务器迁移到新机器的全过程，包括执行数据备份、新集群恢复以及在迁移过程中遇到的问题及解决方案。在迁移过程中，重点涉及v2和v3版本的数据备份，新节点的启动与配置调整，以及如何解决member count不匹配和找不到数据库快照文件的错误。

因为服务器过保要下线，需要将etcd迁移到新的机器上，下面是我的踩坑记录：

迁移流程

1. 执行数据备份

备份 v2：

$ etcdctl --endpoints <endpoints> --ca-file <ca-file> --cert-file <cert-file> --key-file <key-file> backup --data-dir <data-dir> --backup-dir <back-dir>

Example:

$ etcdctl --endpoints <endpoints> --ca-file <ca-file> --cert-file <cert-file> --key-file <key-file> backup --data-dir /home/work/etcd/data --backup-dir /home/work/backup/etcd

注：此处的数据目录为：/home/work/etcd/data ，备份路径为：/home/work/backup/etcd

备份 v3：

首先设置API为v3：

$ echo "export ETCDCTL_API=3" >> ~/.bashrc
$ source ~/.bashrc

备份v3数据：

$ etcdctl --endpoints <endpoints> --cacert <ca-file> --cert <cert-file> --key <key-file> snapshot save <back-file>

Example:

$ etcdctl --endpoints <endpoints> --cacert <ca-file> --cert <cert-file> --key <key-file>  snapshot save /home/work/backup/etcd/member/snap/db

注：此处的数据存储目录为 /home/work/backup/etcd/member/snap/db<

最低0.47元/天解锁文章

确定要放弃本次机会？

福利倒计时

: :

立减 ¥

普通VIP年卡可用

立即使用

追_梦_者

关注关注

0
点赞
踩
0

收藏

觉得还不错? 一键收藏
0
评论
分享

复制链接

分享到 QQ

分享到新浪微博

扫一扫
举报

举报

专栏目录

etcd v2 数据迁移至 v3 格式的 etcd 3.5 版本

Terry Tsang

11-03

972

目的当前使用中的 etcd 集群版本为 3.1.10 使用中数据格式为 version 2 需要转换格式为 version3 并升级 etcd 至 3.5 版本注意官方文档中有提及， version 2 版本格式不支持直接升级至 3.2 以上因此需要先从 3.1.X 版本中转换 etcd 数据格式为 version 3 然后从 3.1.x 通过 version3 备份恢复方法完成数据迁移 步骤 etcd 集群 3.1.10 数据备份备份数据恢复至 3.1.20 版本从 3.1.20 版

服务发现：从Consul到Etcd注册中心实战

shejizuopin的博客

04-18

1091

Consul是一个综合性的服务发现、配置和管理平台。它提供了丰富的功能，包括健康检查、服务注册与发现、键值存储等。Consul通过HTTP API和DNS接口，使得服务能够轻松地进行注册和发现。Etcd是一个分布式键值存储系统，它提供了一种简单而可靠的方式来存储和共享数据。在Etcd中，服务的注册和发现可以通过创建和查询键值对来实现。Consul和Etcd都是优秀的服务发现注册中心，各自具有独特的优势和适用场景。在选择时，开发者应根据具体的业务需求、技术栈和团队熟悉度来决定。

参与评论您还未登录，请先登录后发表或查看评论

etcd数据迁移

sre救赎之路

12-15

868

场景1 更换高性能盘停掉etcd服务高性能盘上创建新的数据目录 copy旧数据文件到新数据目录中修改配置文件的数据目录为新目录，然后重启服务场景2 更换高性能物理机器，不停服切换新的机器需要先安装好etcd服务先启动安装好的一台etcd，单独起来，然后查看etcd的member的ID 到原有的三台etcd集群上，将第二部步中起来的etcd添加到集群(添加节点需要用到etcd的member ID 和peer-urls地址）将原来三台的etcd的ETCD_INITIAL_CLUST

Etcd故障排除--recovering backend from snapshot error: failed to find database snapshot file (snap: snaps

Q先生

06-13

4325

etcd故障恢复--recovering backend from snapshot error: failed to find database snapshot file (snap: snapshot file doesn't exist)

etcd迁移数据目录或迁移节点

qq_21305943的专栏

08-21

2507

有时候，在实际生产过程中， etcd节点想要迁移或者etcd数据目录所在磁盘性能不足，需要迁移节点或者目录。有多种方法。今天列一个比较靠谱的方式，保证数据的完整性先来一波etcd的基础命令，我这里是用kubeadm部署k8s集群。

etcd的三种数据迁移方式

qq_44397993的博客

04-02

7103

目前我们在推动租户上云的过程中，kubernetes集群的规模越来越大，对于整个集群的稳定性来说，肯定是不言而喻的，我这边维护上云租户使用的kubernetes集群基本上都是采用的虚拟机，各个项目规模达到一定规模，就会首当其冲出现etcd的性能问题，针对这个问题我们对etcd采取了迁移到好的裸金属主机上或者在虚拟机上挂上块存储，以下介绍我们在生产环境上执行etcd的三种迁移方式。情景一、三台etcd集群所在目录的磁盘性能达不到，分别在三台etcd的虚拟机上单独挂载快存储提供给etcd使用，数据迁移操作如

【万亿级数据实战】ETCD分片架构设计！手撕海量数据存储，性能直接拉满！

Memory_mumu的博客

03-19

809

分片按地域分布，减少网络延迟（如华东/华北/华南集群）：分片集群必选NVMe SSD，吞吐量提升10倍+：单分片内保证ACID，跨分片通过Saga模式补偿。：高频访问数据独立分片，低频数据归档至对象存储。：存储分片路由信息（分片ID → 集群地址）：非关键数据先写入本地队列，批量提交ETCD。：分片故障时自动切换至备用集群，保障可用性。：原生不支持自动分片，需手动设计分片策略。：新旧分片同时写入，校验一致性后切换流量。：先迁移1%数据，确认无误后全量迁移。：维护分片映射关系，实现透明化访问。

《Kubernetes管理篇：基于etcd实现K8S集群数据备份与恢复（方案一）》

东城绝神

05-05

357

《Kubernetes管理篇：基于etcd实现K8S集群数据备份与恢复（方案一）》

操作系统迁移实战之Dubbo 2.7.5 移植

openEuler_的博客

08-23

472

Dubbo是阿里巴巴公司开源的一个高性能优秀的服务框架，使得应用可通过高性能的RPC（远程过程调用）实现服务的输出和输入功能，可以和Spring框架无缝集成。简单地说，Dubbo是一个基于Spring的RPC框架，能够实现服务的远程调用、服务的治理。我以openEuler 20.03 LTS SP1为例，聊一下移植方法。也希望大家提供一些建议。

Kubernetes的etcd数据查看和迁移

weixin_34163553的博客

12-11

1076

2019独角兽企业重金招聘Python工程师标准>>> ...

centos7安装etcd + etcd数据迁移

qq_40421573的博客

01-07

355

【代码】centos7安装etcd + etcd数据迁移。

etcd包不能导入的问题

qq_53267860的博客

02-23

353

etcd包不能导入的问题 go get go.etcd.io/etcd/clientv3 导包后去出现下面的问题在go.mod添加 replace google.golang.org/grpc => google.golang.org/grpc v1.26.0 再导入即可： go get go.etcd.io/etcd/clientv3 package main import ( "context" "fmt" "go.etcd.io/etcd/clientv3"

Kubernetes集群之ETCD迁移

Kubernetes云计算的专栏

08-25

1274

1 对于物理服务器安装的k8s集群，我们队故障的节点重新安装操作系统，并且使用原有的ip即可。如果使用EasyStack环境，则只需要登录租户的web控制台，对该主机执行“重建云主机”即可做到。目的就是回到干净的相同版本的os系统，使用原来的ip。2 安装docker，从其它 master节点拷贝 /etc/docker/daemon.json 到新节点对应目录下。# 异常故障节点,从上面的 etcdctl cluster-health 就能查到故障节点的 id。此步比较容易，不做详细扩展。...

etcd数据迁移方案：跨版本数据迁移指南

最新发布

gitblog_01164的博客

09-03

801

在分布式系统的生命周期中，etcd作为关键数据存储组件，版本升级和降级是不可避免的操作场景。etcd从3.5版本开始引入了完善的数据迁移机制，支持跨版本的数据结构迁移，确保数据在不同版本间的兼容性和一致性。本文将深入解析etcd数据迁移的核心原理、操作流程和最佳实践。 ## 迁移机制架构 etcd的数据迁移基于存储模式版本控制机制，通过`etcdutl migrate`命令实现自动化迁移。迁移...

Etcd数据同步

weixin_56410104的博客

09-02

1349

etcd 数据同步

K8s集群的Etcd数据库的备份与还原

lihongbao80的专栏

08-25

2989

etcd备份还原

K8S集群维护之etcd集群数据备份还原

那个那个

05-11

558

export ETCDCTL_API=3 etcdctl snapshot restore /usr/local/src/snapshot_20210509-144401.db –data-dir="/data/k8s/etcd_new/etcd.restore" –name k8s01 –initial-cluster “k8s01=https://172.16.1.11:2380,k8s02=https://172.16.1.12:2380,k8s03=https://172.16.1.13:23

etcd

贝克街的流浪猫

03-28

1792

引言前面的文章中,介绍了基于Paxos的ZooKeeper，本文将介绍另一种分布式一致性算法Raft的工业级实现————etcd，它们虽然实现方案不同，但是最终的实现效果都很像，而且etcd相较于ZooKeeper来说，更轻，更容易理解和使用，接下来就让我们一起来看一下etcd的实现思想。简介 etcd 是一个 Go 语言编写的分布式、高可用的一致性键值存储系统，用于提供可靠的分布式键值(key-value)存储、配置共享和服务发现等功能。 etcd可以用于存储关键数据和实现分布式调度，它在现代化的集

etcd数据导入导出：批量数据处理技巧

gitblog_01196的博客

09-03

471

在分布式系统运维中，你是否遇到过这些场景？ - 生产环境etcd集群需要迁移到新硬件 - 开发环境需要从生产环境复制部分数据进行测试 - 灾难恢复时需要快速恢复关键配置数据 - 多集群间需要同步重要配置信息传统的手工逐条操作不仅效率低下，还容易出错。etcd作为分布式键值存储的核心组件，其数据导入导出能力直接关系到系统的可靠性和运维效率。 ## 核心工具：etcdctl与etcdutl的完...