Redis持久化——追加与快照

已于 2023-03-27 23:07:52 修改
阅读量427 收藏
点赞数
CC 4.0 BY-SA版权
分类专栏： db 文章标签： redis 数据库 缓存
于 2023-03-26 18:23:08 首次发布
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.youkuaiyun.com/iUcool/article/details/129782403
Redis的持久化包括RDB和AOF两种方式，RDB通过定期快照保存数据，适合快速恢复但可能丢失部分更新；AOF记录每次写操作，提供更高安全性但文件体积可能增大。AOF的保存模式有三种，影响数据安全性和性能。Redis通过后台线程进行AOF重写以优化文件大小。若追求性能，选择RDB；若重视数据完整性，AOF更优。

摘要生成于 C知道 ，由 DeepSeek-R1 满血版支持， 前往体验 >

持久化意味着写入数据到持久化储存。redis有两个持久化手段

  • RDB(Redis Database): 以指定的时间间隔执行数据的时间点快照。
  • AOF(Append Only File): 持久化每个server收到的写入操作到log。

AOF执行过程

  1. 命令传播: Redis将执行完的命令等信息发送给AOF程序中

  2. 缓存追加: AOF程序转化接收到的命令数据为网络通讯协议格式，然后追加到AOF缓存

  3. 文件写入与保存: 将AOF缓存追加到AOF文件末尾，在满足保存条件的情况下，保存到磁盘中

保存模式：

  • AOF_FSYNC_NO: 不保存。不保存并不是真的不保存，而是不主动保存。在redis关闭、AOF功能关闭或者系统刷新。比如Linux一般会每30s刷新

    通常由主线程执行写入和保存，会堵塞进程

  • AOF_FSYNC_EVERYSEC: 每一秒保存

    主线程写入，堵塞主线程。子线程保存

  • AOF_FSYNC_ALWAYS: 每次新命令追加都保存

    主线程写入，堵塞主线程。子线程保存

值得注意的是每一秒保存模式并不是真的每一秒保存。

  • 若子线程正在执行SAVE
    • 执行未超过2s，那么程序直接返回
    • 执行超过2s，程序执行写入，但不执行保存
  • 若子线程没有执行SAVE
    • 距上次保存不超过1s，写入
    • 距上次保存超过1s，写入并执行

也就是说在子线程正在执行保存且超过2s的情况下，是存在损失2s以上数据可能性的

数据还原

aof还原数据是创建一个不带网络连接的伪客户端，随后读取aof文件，还原命令并执行

重写

为了防止aof文件越来越大，redis会对aof文件进行重写。

比如对于以下先设置k为hello，随后设置为world，那么重写就会合并这两条命令为设置k为world

set k hello
set k world

进一步，为了不影响主线程，redis将重写交给了后台线程处理。并提供了重写缓存缓存在重写期间执行的操作

RDB执行过程

rdb就是将在内存中的数据快照保存到磁盘。

总结

如果希望更快地恢复数据，希望最大化Redis性能，那么RDB更佳。

如果希望更高的安全性，那么AOF更适合

当然也可以全都要

Ref

  1. https://redis.io/docs/management/persistence/
  2. https://redisbook.readthedocs.io/en/latest/internal/aof.html
  3. https://redisbook.readthedocs.io/en/latest/internal/rdb.html
Redis——Redis持久化原理
庄小焱
03-29 1971
Redis 的读写都是在内存中，所以它的性能较高，但在内存中的数据会随着服务器的重启而丢失，为了保证数据不丢失，我们需要将内存中的数据存储到磁盘，以便 Redis 重启时能够从磁盘中恢复原有的数据，而整个过程就叫做 Redis 持久化。Redis 持久化也是 Redis 和 Memcached 的主要区别之一，因为 Memcached 不具备持久化功能。
Redis 持久化——AOF
磊哥聊Java
10-28 254
使用 RDB 持久化有一个风险，它可能会造成最新数据丢失的风险。因为 RDB 的持久化有一定的时间间隔，在这个时间段内如果 Redis 服务意外终止的话，就会造成最新的数据全部丢失。 可能会操作 Redis 服务意外终止的条件： 安装 Redis 的机器停止运行，蓝屏或者系统崩溃； 安装 Redis 的机器出现电源故障，例如突然断电； 使用 kill -9 Redis_PID 等。 那么如何解...
redis追加内容
计算机毕业论文源码，学生个人网页制作html源码。贴近用户做网络推广和互联网优化。
11-13 406
redis 一次性移除多少条数据 在业务代码层实现，起几个毫无关联的redis实例，在代码层，对key进行hash计算，然后去对应的redis实例操作数据。 这种方式对hash层代码要求比较高，考虑部分包括，节点失效后的替代算法方案，数据震荡后的自动脚本恢复，实例的监控，等等。 本回答由提问者推荐 如何让red...
向redis添加数据
zhaojikun521521的博客
12-08 3846
from flask import Flask,send_file,send_from_directory import time import datetime import redis import random from flask import request import io import os from flask import Response app = Flask(__name__) r = redis.Redis() task_dick = {} @app.route('/c
redis批量增加数据
奋力的小白的博客
01-24 1990
因项目中发现随着redis数据库内数据的增加，keys*会加锁，导致查询时间长，因此，为了模拟此场景，需要批量添加大量数据，redis中批量增加数据的步骤为： 1、先用python造数据： 执行 python batch.py >redis.txt 2、将redis.txt从windows环境移动到linux环境中，需要进行格式转换，命令为： unix2dos redis.tx...
redisTimple 对redis进行增加、删除、查找
①杯空氣的博客
08-29 1408
 配置redisConfig package com.qn.config; import org.springframework.context.annotation.Bean; import org.springframework.context.annotation.Configuration; import org.springframework.data.redis.connecti...
redis 消息队列方案
猪猪侠的博客
01-26 979
redis 消息队列方案 观察角度：消息有序，重复消息处理，消息可靠性保证 pub/sub 发布订阅机制 list集合 消息有序：lpush和rpop可以保证消息顺序的被消费 重复消息处理：list没有为消息提供唯一标识，需要生产者提供唯一标识，消费程序自行判断消息是否重复 消息可靠性保证：讲的是消息因为网络，停电，宕机等突发因素丢失，list没有为消息保存副本，这样消费者如果正在消费时有突发因素，那么就会发生消息丢失。 所以list做消息队列时，如果是对消息丢失不是很敏感的场景可以使用。 stream
Redis持久化——AOF
weixin_45414689的博客
08-23 891
Redis持久化——AOF1、Redis持久化2、AOF 简介3、持久化查询和设置4、触发持久化1）自动触发2）手动触发5、AOF文件重写1）什么是AOF重写？2)AOF重写实现3）AOF重写流程6、配置说明7、优缺点AOF优点AOF缺点8、总结 1、Redis持久化 使用 RDB 持久化有一个风险，它可能会造成最新数据丢失的风险。因为 RDB 的持久化有一定的时间间隔，在这个时间段内如果 Redis 服务意外终止的话，就会造成最新的数据全部丢失。 可能会操作 Redis 服务意外终止的条件： 安装 Re
Redis持久化、主从与哨兵架构详解.pdf
03-18
Redis持久化机制包括RDB快照和AOF（Append Only File）两种方式，它们有不同的特点和使用场景，下面将详细分析这两种机制。 首先，RDB是通过创建数据集的快照来进行持久化的，在默认情况下，Redis会在内存中存储...
Redis 持久化——RDB
磊哥聊Java
10-28 340
Redis 的读写都是在内存中，所以它的性能较高，但在内存中的数据会随着服务器的重启而丢失，为了保证数据不丢失，我们需要将内存中的数据存储到磁盘，以便 Redis 重启时能够从磁盘中恢复原有的数据，而整个过程就叫做 Redis 持久化。 Redis 持久化也是 Redis 和 Memcached 的主要区别之一，因为 Memcached 不具备持久化功能。 1 持久化的几种方式 Redi...
Redis——五大数据类型（String、Hash、List、Set、ZSet）简要介绍
贝尔摩德苦艾酒
02-03 8751
Redis——五大数据类型（String、Hash、List、Set、ZSet）简要介绍
redis数据结构详解及命令
smiles_914的博客
08-21 687
前言 Redis和Memcached最大的区别，Redis 除啦支持数据持久化之外，还支持更多的数据类型而不仅仅是简单key-value结构的数据记录。Redis还支持对这些数据类型做更多的服务端操作，从而也能减少网路的IO次数与数据体积，这里也比Memcached要方便与高效，只针对这一点。 Redis主要支持的数据类型有5种：String ，Hash ，List ，Set ，和 Sorte...
redis追加持久化-aof（append only file）
wofozibei的博客
10-13 1152
aof持久化本质:将用户执行的”写”指令保存到文件中，恢复数据的时候就是执行这些写指令 aof需要开启，开启aof时需要注意，开启时会清空redis的内部数据 appendonly no 修改成 appendonly yes，你可以自己指定filename 修改完成之后，重启redis服务，因为我是通过源码安装的，所以我有两种重启方式 1，./redis-cli -p 6380 shut
redis 不能添加数据
一个吃水不忘挖井人的博客。希望能帮助到你
05-11 868
Commands that may modify the data set are disabled. Please check Redis logsfordetails about the error. 解决方案： 127.0.0.1:6379> config set stop-writes-on-bgsave-error no OK
Redis的基本数据操作命令（一）
Diamond
08-02 1万+
一 String类型1 set设置key对应的值。set name Diamond2 setnx设置key的值，如果key已存在，返回0。nx为not exist的意思。127.0.0.1:6379> setnx name Fox (integer) 03 setex设置key的值，并设置key的存活时间。127.0.0.1:6379> setex age 10 24 OK 127.0.0.1:63
redis的增加元素操作
微电子学与固体电子学-俞驰
05-03 2377
-------------集合类型的key的"增"操作-------------------------------------------如果不存在set1,就新建key为set1,同时指定类型是set,加入元素yuchiSADD set1 yuchi-------------字符串类型的key的"增"操作------------------------------------------127...
redis数据库队列（list），集合（set）元素设置类似过期（expire）功能
热门推荐
尤里安龙卷风
11-29 6万+
问题：项目需要为每个用户维护一个列表，存放一些数据。列表中的值有过期时间，过期的值查询可以找到也可以找不到，还会有一个验证，所以无所谓。但是redis队列只有一个整体的过期功能，没有每个元素的单独过期功能，所以如果用户一直不停向队列塞东西，队列就会变的越来越大。这显然不合理。资料：https://stackoverflow.com/questions/16545321/how-to-expire-t
redis常用的五大数据类型和redis新增类型以及对应的命令
zsj_javaer的博客
09-15 964
redis常用的五大数据类型和redis6新增类型，以及常用命令。String类型是一个key对应一个value。String类型是二进制安全的，也就是Redis的string可以包含任务数据。比如jpg图片或者序列化的对象。String类型是Redis最基本的数据类型，一个Redis中字符串value最多可是512M。String的数据类型是简单的动态字符串，是可以修改的字符串，内部结构实现上类似于j
"深入了解Redis持久化机制：RDB快照与自动保存设置
综上所述，Redis持久化、主从复制和哨兵架构是Redis在数据持久化和高可用性方面的重要特性和功能。通过合理地配置和使用这些特性和功能，可以提高系统的数据安全性、可靠性和扩展性，从而更好地应对实际的业务需求和...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值