Redis数据恢复的细节和选择

Redis的内存淘汰策略(八) 以日志的形式来记录每个写操作(读操作不记录),将Redis执行过的所有写指令记录下来(读操作不记录),只许追加文件但不可以改写文件,redis启动之初会读取该文件重新构建数据,换言之,redis重启的话就根据日志文件的内容将写指令从前到后执行一次以完成数据的恢复工作。RDB可以搞定备份恢复的事情,为什么还会出现AOF?使用RDB进行保存时候,如果Redis服务器发送故障,那么会丢失最后一次备份的数据!AOF出现是来解决这个问题!同时出现RDB和AOF是冲突呢?还是协作?是协作,但是首先启动找的是aof。当r 阅读详情

rdb文件是否可以和aof文件共存?

可以

rdb文件和aof文件,先读取哪一个?

先读取aof文件,在读取rdb文件

如何选择?

1.如果只做缓存,那么可以不开启任何的持久化
2.考虑做持久化数据,建议开启两种持久化数据方式
为什么?
首先redis启动先读取aof文件,因为aof文件比rdb文件完整
rdb可以做一个备份的数据库

性能建议

因为RDB文件只用作后备用途,建议只在Slave上持久化RDB文件,而且只要15分钟备份一次就够了,只保留save 900 1这条规则。

如果Enalbe AOF,好处是在最恶劣情况下也只会丢失不超过两秒数据,启动脚本较简单只load自己的AOF文件就可以了。代价一是带来了持续的IO,二是AOF rewrite的最后将rewrite过程中产生的新数据写到新文件造成的阻塞几乎是不可避免的。只要硬盘许可,应该尽量减少AOF rewrite的频率,AOF重写的基础大小默认值64M太小了,可以设到5G以上。默认超过原大小100%大小时重写可以改到适当的数值。

如果不Enable AOF ,仅靠Master-Slave Replication 实现高可用性也可以。能省掉一大笔IO也减少了rewrite时带来的系统波动。代价是如果Master/Slave同时倒掉,会丢失十几分钟的数据,启动脚本也要比较两个Master/Slave中的RDB文件,载入较新的那个。新浪微博就选用了这种架构

参考资料:尚硅谷周阳redis讲解

本文若有错误请指正,互相学习,加油!

Redis持久化机制 Redis持久化是一种重要的机制,用于将内存中的数据保存到磁盘上,以防止数据在服务器宕机或重启时丢失。Redis提供了两种主要的持久化方法:RDB(Redis DataBase)和AOF(Append Only File)。下面我将详细介绍这两种方法。RDB持久化会在指定的时间间隔内创建数据集的快照,并将其保存为一个单一的压缩文件。这个过程可以通过配置文件中的save指令来自动触发,也可以通过执行SAVE或BGSAVE命令来手动触发。 阅读详情

相关推荐

Redis源码分析——用剖析工具的方式来分析Redis的底层实现细节”

Redis是当今最流行的开源键值数据库之一,其性能卓越、可靠性高、数据类型丰富等特性,已经成为互联网中不同场景下的常见技术选型。作为一个经典的“瑞士军刀”,Redis在互联网领域得到了广泛应用,具有广泛的应用场景。但是随着技术的发展,代码的复杂度也逐渐上升,从而影响了Redis的维护和扩展难度。为了更好地了解和掌握Redis内部工作机制,帮助用户更好地理解其设计思想,提升应用效率,本文将详细介绍Redis的核心模块和工作流程,并通过剖析工具的方式来分析Redis的底层实现细节。

AI天才研究院 3087

Redis RDB 和 AOF

导读 RDB 和 AOF 对比: 持久化方式选择 如果对数据安全性要求极高,应该同时使用两种持久化方式。 如果可以承受若干时间内的数据丢失,可以只使用 RDB 持久化。 不建议只使用 AOF 持久化,因为定时生成 RDB 快照(snapshot)非常便于进行数据库备份,并且 RDB 恢复数据集的速度要比 AOF 恢复的速度要快。 RDB 和 AOF 的恢复优先级 如果 Redis 同时使用 RDB 和 AOF 持久化,Redis 会优先使用 AOF 进行恢复数据。 在启动 Redis 时,如果已经存在了

m0_61802230的博客 981

告别MATLAB!用Python的PYPOWER搞定电力系统潮流计算(附Case30完整代码)

本文介绍了如何从MATLAB迁移到Python,使用PYPOWER工具包进行电力系统潮流计算。通过详细的环境准备、数据接口兼容性实践、潮流计算实现及最优潮流计算进阶,帮助工程师和学生无缝过渡到Python生态。文章还展示了结果处理与可视化技巧,并附有Case30完整代码示例。

weixin_30411819的博客 303

redis持久化之RDB和AOF的区别以及redis恢复数据

1

qq_52563729的博客 841

用VFP计算 CRC-16 Modbus 校验位

1. Modbus是一种串行通信协议,最初由Modicon(目前属于施耐德电气公司)于1979年开发2. Modbus协议是应用在Modicon产品上的,后来才被移植到其他产品上3. Modbus协议的通信接口可以有多种选择,如RS232、RS485、以太网等。

lddnzx的博客 519

SAP MM委外加工保姆级教程:从BOM配置到MIGO发货的完整避坑指南

本文提供SAP MM模块中委外加工的完整操作指南,涵盖从BOM配置到MIGO发货的全流程。详细解析委外采购和工序委外两种模式,包括主数据配置、采购订单创建及物料移动等关键步骤,帮助用户规避常见错误,提升供应链管理效率。特别适合制造业企业实施SAP外包业务参考。

weixin_26905487的博客 530

不知道这些,简历上千万不要说你会 Redis 持久化。。。

点击蓝色“架构文摘”关注我哟加个“星标”,每天上午 09:25,干货推送!来源:http://kaito-kidd.com/从这篇文章开始,我们来介绍Redis高可用相关的机制。Redi...

架构文摘 617

具身智能四大技术路线:VLA、大小脑、世界模型与强化学习

具身智能是机器人实现感知-决策-执行闭环的核心范式,其本质在于物理世界中的具身化交互能力。技术演进围绕如何高效建模环境、理解指令并生成鲁棒动作展开,衍生出四大主流路径:视觉-语言-动作(VLA)端到端学习、大小脑分层控制、世界模型驱动预测,以及强化学习原生策略优化。VLA强调多模态对齐与泛化能力,适合语义理解优先场景;大小脑架构兼顾实时性与可解释性,是工业落地的高可靠选择;世界模型追求内在物理模拟,代表长期认知跃迁方向;强化学习则扎根仿真试错,在力控、抓取等连续控制任务中展现强鲁棒性。本文聚焦这四大路线的技

weixin_32181267的博客 298

关于Redis中的RDB和AOF策略

关于Redis中的RDB和AOF策略

admin0811的博客 1347

养龙虾经验:OpenClaw用户必看的3个“省token”救命配置

本文分享了3个优化OpenClaw使用成本的配置方案:1)启用上下文压缩功能,可选择全局或单个代理设置,支持safeguard/adaptive两种压缩模式;2)修改SOUL.md提示词,要求模型回答简洁直接;3)限制对话历史长度。方案一效果最佳,可减少长对话的token消耗,但可能影响连贯性。三种方案可单独或组合使用,需根据实际场景调整参数。文章最后邀请读者分享使用痛点,将针对高频问题撰写解决方案。

wpplvhq的专栏 1418

KRC文件——编程中的重要文件

KRC文件是指KUKA机器人控制器(KUKA Robot Controller)所使用的文件格式。KUKA是一家知名的机器人制造商,其机器人控制器通过KRC文件来管理和执行机器人程序。KRC文件包含了机器人的运动指令、逻辑控制、传感器数据等信息,以及与机器人相关的配置参数。这些文件通常使用KRL(KUKA Robot Language)编写,是一种特定的编程语言。KRC文件具有扩展名为.krc的格式,可以在KUKA机器人控制器上直接加载和执行。

TechProX的博客 2973

redis的数据持久化--rdb和aof文件恢复数据

redis持久化 redis是内存数据库,如果不将内存中的数据状态保存的磁盘,那么一旦服务器宕机,服务器中的数据库状态也会消失,所以redis提供了持久化功能。 RDB和AOF 我们既可以把redis理解为缓存技术,也可以理解为数据库,因为redis支持将内存中的数据周期性的写入磁盘或者把操作追加到记录文件中,这个过程称为redis的持久化。redis支持两种方式的持久化,一种是快照方式(snapshotting),也称RDB方式;两一种是追加文件方式(append-only file),也称AOF方式。R

qq_40950903的博客 1551

C#版OpenCV:OpenCVSharp 最详细最全面教程(万字详细总结)

OpenCVSharp 是一个用于 .NET 环境的 OpenCV 包装库,它提供了一种简便的方法来利用 OpenCV 的功能进行图像和视频处理。OpenCV(Open Source Computer Vision Library)是一个开源计算机视觉和机器学习软件库,最初由 Intel 研发并发布。OpenCVSharp 让 C# 和其他 .NET 语言的开发者可以方便地访问 OpenCV 的强大功能。// 打印 OpenCV 版本信息Cv2。

仰望星空的博客 2万+

redis持久化RDB与AOF原理简介、配置、从持久化中恢复数据

Redis为持久化提供了两种方式: RDB:在指定的时间间隔能对你的数据进行快照存储。 AOF:记录每次对服务器写的操作,当服务器重启的时候会重新执行这些命令来恢复原始的数据。 1、AOF持久化方式记录每次对服务器写的操作,当服务器重启的时候会重新执行这些命令来恢复原始的数据,AOF命令以redis协议追加保存每次写的操作到文件末尾.Redis还能对AOF文件进行后台重写,使得AOF文件的体积不至于过大。 2、同时开启两种持久化方式, 在这种情况下, 当redis重启的时候会优先载入AOF文件来恢复原始

weixin_41590779的博客 446

无人机威胁检测(Hostile Drone Detection)——基于YOLOv10与UI界面的实现

Anti-UAV数据集由多种场景下的无人机视频与图片组成,包含无人机目标的多样化姿态、背景、光照变化,专门用于反无人机检测研究。YOLO(You Only Look Once)系列是当前流行的实时目标检测算法,具有速度快、精度高的特点。网络结构优化:更深更轻的主干网络,提升特征提取能力。检测头改进:多尺度特征融合,更好检测小型目标如无人机。训练技巧:使用自动混合精度训练(AMP)、数据增强、标签平滑等技术。

YOLO 232

SAP B1中文培訓教材_SDK

公司内部培训资料,对开发工具 ,DIAPI, UIAPI,Add-ON有详细解说

Redis 持久化机制详解

RDB:适合备份和快速恢复,容忍少量数据丢失AOF:适合对数据完整性要求高的场景混合模式:Redis 4.0+推荐,兼顾两者优点在生产环境中,应根据数据重要性、性能要求和恢复时间目标(RTO)来选择合适的持久化策略,并配合监控和备份策略,确保数据安全。

weixin_45251121的博客 709

温度PID控制PLC程序

温度PID稳定控制程序,适用于欧姆龙PLC,对其他PLC也具有很大参考价值

redis 持久化

aof默认是不开启的,因为aof非常容易产生大文件,虽然官方提供重写但是在文件体积过大的时候还是容易造成阻塞,谨慎考虑使用。rbd和aof在大数据量分别有各种不同情况的系统性能影响,具体使用何种解决策略需要根据系统资源以及业务的实际情况决定。创建快照类似,同样会有子进程拖垮的问题,同时会有大文件在重写的时候带来巨大的文件系统删除的压力,导致系统阻塞。大致的内容就是说redis会将较早的部分内容转为RDB文件进行恢复,同时加入近期的数据为AOF文件。加载的时候先执行rdb文件的恢复,然后再加载aof命令。

2301_78021017的博客 803

Statistics and Machine Learning Toolbox

Statistics and Machine Learning Toolbox(带书签),MATLAB统计学习工具

ET2012新版免狗免安装绿色软件

ET2012新版免狗免安祖昂绿色软件。,新界面,新视觉,

redis 数据恢复过程

redis的数据恢复过程  redis的数据载入主要是指redis重启时候恢复数据的过程,恢复的数据总共有两种: aof 数据文件 rdb 数据文件 数据恢复的过程是二选一的过程,也就是如果开启aof持久化那么就会使用aof文件进行恢复,如果没有才会选择rdb文件进行恢复。 void loadDataFr...

weixin_33816300的博客 1075

Redis开启AOF和RDB两种持久化(数据恢复小demo)

AOF和RDB的区别网上一大把,可以去背书一样背,理论太多,直接实操 首先有几点: (1)Redis开启持久化非常简单,只要改个配置,踩点坑就行。 (2)配置文件中如果开启了持久化,那就不需要我们操心,它服务重启会自动恢复数据,跟我们的springboot, Java,node,半毛钱关系没有。 (3)MacBook,Linux,Windows虽然改配置文件是一样的,但是有些坑是不一样的。 (4)一定要注意自己的版本!一定要注意自己的 redis 的版本!一定要注意自己本地的redis的版本!! (1)查看

whiteBearClimb的博客 1328

Redis中RDB和AOF使用细节

Redis RDB 概念: 指在规定时间间隔内将内存中的数据集快照写入磁盘,也就是行话里讲的sanpshot快照,它恢复时将快照文件直接读入到内存中 Redis会单独的创建(fork)可以理解为复制一个子进程来进行持久化,会先将数据写入到一个临时文件中,待持久化过程结束了,再用这个临时文件替换上次持久化好的文件。整个过程中,主进程不进行任何io操作,这就确保了极高的性能,如果需要进行大规模的数据的恢复,且对于数据恢复的完整性不是非常敏感,那么RDB方式要比AOF方式更加高效。RDB缺点时最后一次持久化后数

weixin_47270063的博客 873

memcache和redis缓存对比及我为什么选择redis

对比结论 1. 性能上: 性能上都很出色,具体到细节,由于Redis只使用单核,而Memcached可以使用多核,所以平均每一个核上Redis在存储小数据时比Memcached性能更高。而在100k以上的数据中,Memcached性能要高于Redis,虽然Redis最近也在存储大数据的性能上进行优化,但是比起 Memcached,还是稍有逊色。 2. 内存空间和数据量大小: MemCached可以修改最大内存,采用LRU算法。Redis增加了VM的特性,突破了物理内存的限制。 Memcached单...

marcushbs的博客 328

Redis中的RDB和 AOF的区别

Redis中持久化技术分为两种,一种是RDB,一种是AOF. 这两者有什么区别呢? 定义的区别: RDB:RDB是每隔一段时间自动将内存中的数据集快照写入磁盘中,也就是我们所说的Snapshot快照,他恢复(读取)数据是将快照文件直接读取到内存中. AOF:AOF是用日志的形式将每一个写操作都记录在日志文件中,只允许进行增量操作,不允许进行修改操作.他恢复(读取)数据来执行过的操作重新执行一遍. 实现的区别 RDB: Redis会单独创建(fork)一个子进程来进行持久化,会先将数据写入到一个临时

shiliu_baba的博客 4690

Redis 理解Redis持久化

文章目录0.前言1.RDB的配置查看RDB配置修改RDB配置2.RDB的SAVE和BGSAVE3.BGSAVE实现细节4.AOF的配置5.AOF重写 0.前言 通俗讲持久化就是将内存中的数据写入非易失介质中,比如机械磁盘和SSD。 在服务器发生宕机时,作为内存数据库Redis里的所有数据将会丢失,因此Redis提供了持久化两大利器:RDB和AOF。 RDB:Redis Dump Binary #全量二进制导出 AOF: Append-Only File #增量文件追加 RDB 将数据库快照以二进制

Ca_va的博客 393

Java数据恢复经典案例解析(90%开发者忽略的关键细节)

掌握Java数据恢复实战技巧,解决系统崩溃、误删等数据丢失难题。涵盖文件系统解析、对象反序列化修复等核心方法,适用于日志恢复、数据库回滚等场景。90%开发者忽略的关键细节深度剖析,值得收藏。

IterLoom的博客 821

Redis篇——Redis持久化,学习Redis的重点中的重点!涵盖RDB和AOF持久化机制详细的介绍和对比,保姆级教程!一篇文章帮你彻底拿下!

一、前请了解Redis是内存数据库,如果不将内存中的数据状态保存到磁盘中,那么一旦服务器进程中断,服务中的数据状态也会消失。因此,Redis提供了持久化的功能!!!!!!二、重要性在面试和工作中,是非常常用和高频提问的,尤其是要学扎实RDB和AOF!!!!!!

我热爱学习,也乐于分享。无论是科技前沿的洞见,还是生活中的小技巧,我都会在这里与你分享。我相信,知识就是力量,而分享则能让这份力量得到更好的传递。 1110

Redis常见面试问题细节

Redis(Remote Dictionary Server) 是一个使用 C 语言编写的,开源的(BSD许可)高性能非关系型(NoSQL)的键值对数据库。与传统数据库不同的是 Redis 的数据是存在内存中的,所以读写速度非常快,因此 redis 被广泛应用于缓存方向,每秒可以处理超过 10万次读写操作,是已知性能最快的Key-Value DB。数据库容量受到物理内存的限制,不能用作海量数据的高性能读写,因此Redis适合的场景主要局限在较小数据量的高性能操作和运算上。

m0_57069477的博客 708
上一篇: Redis持久化之AOF
下一篇: Redis的事务
小小辉先生
博客等级 码龄7年 16粉丝 75原创
评论
成就一亿技术人!
拼手气红包6.0元
还能输入1000个字符
 
 条评论被折叠 查看
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付:10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值