2021-12-15 [redis] cluster集群数据导出及备份策略

已于 2022-11-22 16:50:05 修改
阅读量2.3k 收藏
点赞数
CC 4.0 BY-SA版权
分类专栏： redis 文章标签： redis 缓存 数据库
于 2021-12-15 18:40:12 首次发布
版权声明：本文为博主原创文章，遵循 CC 4.0 BY 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.youkuaiyun.com/adofsauron/article/details/121958994
本文探讨了如何从Redis Cluster导出全部数据，推荐使用redis-migrate-tool进行集群备份。该工具通过模拟主从协议实现全量和增量同步。备份方案包括修改Redis代码以实现仅磁盘持久化，以及利用兜底备份机器进行持续数据同步。

摘要生成于 C知道 ，由 DeepSeek-R1 满血版支持， 前往体验 >

目录

摘要:

第三方工具调研:

一. redis-dump, 不推荐

二. redis-migrate-tool, 推荐

作为redis集群备份的方案:

待处理:

摘要:

redis的cluster集群数据按槽位存储, 本文记录如何将全部数据导出.

第三方工具调研:

一. redis-dump, 不推荐

安装redis-dump:

yum install ruby rubygems ruby-devel -y
gem install redis-dump

但是在测试的时候发现, redis-dump只能将连接的redis-server的数据导出, 不能导出整个集群的数据.

二. redis-migrate-tool, 推荐

github地址: https://github.com/JokerQueue/redis-migrate-tool

编译方法:

1. 先得装上automake

yum install automake -y

2. 编译:

aclocal
autoconf
autoheader
automak
了解本专栏 订阅专栏 解锁全文 超级会员免费看
使用redis-shake工具迁移云Redis数据（二十一）
江晓龙的博客
12-08 1万+
阿里云Redis版本时5.x，由于版本兼容性问题，我们也需要在ECS中部署5.x版本的Redis。 2.安装redis-shake工具 3.redis-shake配置文件 redis-shake其他扩展参数: 源redis的类型，支持一下4种类型：: 单db节点/主从版模式。如果源端是从多个db节点拉取就选择这个模式，即便是codis等开源的proxy-db架构。: sentinel模式。: 集群模式。开源的cluster。对于阿里云来说，用户目前无法拉取db的地址，所以此处只能是proxy。: pro
redis主从备份双机热备集群简洁配置方式
01-08
redis主从备份双机热备集群简洁配置方式，主要配置redis.conf文件和sentinel.conf文件，可以实现主从自动切换，宕机也不怕
Redis集群-分布式缓存
qq_38682924的博客
09-16 813
笔记：Redis集群-分布式缓存
Redis高可用之集群（超详细）
最新发布
2201_75420324的博客
04-13 1407
Cluster模式是Redis的一种高级集群模式，它通过数据分片和分布式存储实现了负载均衡和高可用性。在Cluster模式下，Redis将所有的键值对数据分散在多个节点上。每个节点负责一部分数据，称为槽位。通过对数据的分片，Cluster模式可以突破单节点的内存限制，实现更大规模的数据存储。
redis从一个集群导出到另一个集群
weixin_40202017的博客
07-06 274
导出Redis数据从一个集群到另一个集群 流程图 #render_6_3907389723-svg{font-family:"trebuchet ms",verdana,arial,sans-serif;font-size:16px;fill:#333;}#render_6_3907389723-svg .error-ic...
redis数据导入导出
weixin_34235371的博客
04-01 922
在2017年，项目上的redis集群需要从2.8版本更换为3.2版本，此时涉及到redis数据key的迁移，经百度、×××，发现有三种方法可以实现1、第三方工具redis-dump、redis-load实现2、通过aof机制导入导出，需要开启aof功能3、通过rdb存储机制迁移数据，此方法最为简单，直接dump $key、restore $key即可 此篇主要介绍第一种方式，redis-dump、...
redis-cluster的数据迁移
weixin_44996489的博客
02-02 320
单机迁移到cluster 1、导出单节点数据 工具redis-dump安装 gem install redis-dump 不知道怎么装看上一篇 导出命令 redis-dump -u 192.168.189.10:6379 -d 0 > 6379.jaon 2、恢复到cluster 三个master节点 cat 6379.jaon | redis-load -u 192.168.189.10:6999 cat 6379.jaon | redis-load -u 192.168.189.20:6999
Redis-dump方式集群导入导出数据
嘿嘿师太我来啦的博客
01-31 3483
1、源集群： master1 IP1:6379 master2 IP2:6380 master3 IP3:6381 目的集群： master1 IP4:6379 master2 IP5:6379 master3 IP6:6380 2、安装redis-dump yum install ruby rubygems ruby-devel -y gem install redis-dump -V 若版本低...
Redis-Cluster集群构建
FlyFlywin-L的博客
12-10 265
Redis-Cluster集群构建 本实验需要四台虚拟机，当服务器不够我们每台虚拟机上开两个端口 1号虚拟机配置python 2-4号虚拟机配置redis集群 其中2号虚拟机需要双网卡，其中一张网卡能够上网，需要下载依赖软件 实验流程 一、主机规划 主机 内网 IP 地址 端口 用途 centos1.com 192.168.24.20 6378/6379 存储数据/主节点备份 centos2.com 192.168.24.30 6378/6379 存储数据/主节点备份 centos3
Redis数据导入导出以及数据迁移的4种方法详解
09-08
Redis 数据导入导出和数据迁移是 Redis 管理中的重要环节，对于数据备份、故障恢复、集群扩展等场景有着至关重要的作用。本文将详细解析 Redis 数据导入导出的4种方法。 首先，我们来看第一种方法：使用 AOF...
redis集群配置文件备份
Noah
05-25 819
bind 192.168.1.114 protected-mode no port 6379 tcp-backlog 511 timeout 0 tcp-keepalive 0 daemonize yes supervised no pidfile /var/run/redis.pid loglevel notice logfile "" databases 16 save 900 1 save
redis集群的维护（redis-cli --cluster 命令用法）
热门推荐
cj_eryue的博客
09-12 1万+
1、 --cluster create 创建集群 2、--cluster check检查集群 3、--cluster info 查看集群 4、--cluster fix 修复集群 5、--cluster rehard 迁移槽位 6、 --cluster rebalance 平衡集群 7、 --clusteradd-node 集群扩容 8、--cluster del-node 集群缩容 9、 --cluster call 在集群中执行命令 10、--cluste
redis cluster集群定时备份
东坡居士的博客
12-19 588
对于redis cluster,为了保证高可用，我们在保证并发能力的情况下，还要保证崩溃情况下恢复的能力，因此需要定时保存数据，以应对意外情况出现，下面提供了一种数据备份的设计方法。主节点采用rdb快照的方式进行备份，备份速度快，减少对主进程的影响。以下是备份脚本,可以通过contab命令定时执行如下脚本进行备份。从节点采用aof的形式备份，尽量完整的保存数据。
redis cluster数据迁移
y_zilong的博客
11-05 1569
1、首先确定集群状态，搭建new redis cluster请看前面的文章 集群1迁移集群2 集群模式：1 192.168.121.17:7001, 192.168.121.17:7002, 192.168.121.18:7003, 192.168.121.18:7004, 192.168.121.19:7005, 192.168.121.19:7006 集群模式：2 10.192.64.29:7001, 10.192.64.29:7002, 10.192.64.30:7003, 10.1
linux redis导出数据,redis数据导入导出集群工具
weixin_35385462的博客
05-13 362
redis单节点数据导入集群官方地址:http://www.oschina.net/p/redis-migrate-tool## 安装依赖```apt-get install autoconf automake libtool libffi-dev make```### 安装部署```cd /opt/git clone https://github.com/vipshop/redis-migrat...
Redis集群状态监控 & 重新创建集群 & 备份恢复REDIS数据 Shell脚本
大西瓜的博客
12-01 2394
Redis集群状态监控 & 重新创建集群 & 备份恢复REDIS数据 Shell脚本 reduction_redis_cluster.sh #!/bin/bash -ile ## 脚本路径 INSTALL_DIR="/data/project" ## redis安装路径 REDIS_DIR="$INSTALL_DIR/redis" ## 备份路径 REDIS_BACKUP_DIR="$INSTALL_DIR/redis_back_up" echo 'start check redis s
php如何选择读取哪台redis_Redis集群详解（上）
weixin_39803552的博客
11-19 293
前言我们在Redis主从复制的文章中介绍过利用主从节点实现读写分离来扩展主节点的数据读取能力，那么当主节点的写入能力成为瓶颈时，集群便是性能扩展的解决方案之一。Redis Cluster是Redis的分布式解决方案，在3.0版本正式推出，有效地解决了Redis分布式方面的需求。当遇到单机内存、并发、流量等瓶颈时，可以采用Cluster架构方案达到负载均衡的目的。集群设计，本质上来讲是把数据存储在不...
Redis-Cluster数据迁移之redis-shake（集群到集群）
于琦海
06-01 3254
Redis-Cluster数据迁移之redis-shake（集群到集群） 背景 在项目的实施过程中，由于有dev环境和pro环境，这时会有两个redis集群，但是部分数据从甲方的三方数据库中获取存入生产环境的redis集群中，为了方便测试和数据校验，需要将生产redis集群的各节点数据同步到测试环境的redis集群中，最好能实时的同步增量数据。 方案 写一个多数据源的redis项目，从一个redis集群读出来写到另外一个redis集群。PASS(太蠢了) AOF，RDB直接COPY。PASS(
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

悟世者

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付：¥1
获取中
扫码支付

您的余额不足，请更换扫码支付或充值

打赏作者

实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值