Redis深度历险(6)-持久化

Redis深度历险:核心原理和应用实践带你由入门走向精通 前言 Redis作为目前的主流NoSql数据库,不会是不可能的,在面试中也是非常高频的,一定不能在这个环节丢分,不管是学习,还是面试,以下知识点,都有必要掌握。 下面给大家带来一份Redis深度历险:核心原理和应用实践pdf文档 展示: 目录 开篇:Redis可以用来做什么? 基础:Redis基础数据结构 应用 应用一:千帆竞发--分布式锁 应用二:缓兵之计--延时队列 应用三:节衣缩食--位图 应用四:四两拨千斤--HyperLogLog 应用五:层峦... 阅读详情
1 快照(RDB)方式

快照是一种全量备份的持久化方式,默认生成的是名为dump.rbd的二进制文件;在Redis的配置文件中可以设置其触发条件,将当前的数据全量写入dump.rdb文件中,使用的是bgsave命令。

save 900 1 #在900秒(15分钟)之后,如果至少有1个key发生变化,Redis就会自动触发BGSAVE命令创建快照。
save 300 10 #在300秒(5分钟)之后,如果至少有10个key发生变化,Redis就会自动触发BGSAVE命令创建快照。
save 60 10000 #在60秒(1分钟)之后,如果至少有10000个key发生变化,Redis就会自动触发BGSAVE命令创建快照。

  • 子进程执行备份命令

备份一次数据会耗费相当多的时间,bgsave命令的实质是启动一个子进程(注意Redis是单线程的,所以不能启动子线程,只可启动子进程)去执行备份的操作。

  • CopyOnWrite

子进程备份时采用的是写时复制策略,即开始备份时子进程仍是对当前的二进制数据进行备份,当父进程更改了这份数据时,才将这份被更改的空间先复制出一份副本给子进程使用,这样就避免了副本的全量复制

  • 使用快照备份的缺点

有一定的触发条件,且每次都需要进行全量的复制,时间效率较低,若在没有触发bgsave命令时发生宕机则会发生数据的损失

  • 使用快照备份的优点

二进制文件占用空间小,并且在Redis启动时数据读取速度快

2 增量备份(Append-Only,aof)

增量备份每隔一段时间都会记录这段时间的写入命令和删除命令然后存储在一个名为appendonly.aof的文本文件中,与快照备份相比,增量备份速度很快,并且每隔一定时间进行备份,实时性好,默认不开启该模式,需要通过

appendonly yes

来开启

  • aof重写

由于appendonly.aof文件存储的是Redis命令,所以时间一久,占用的空间会很大。并且在Redis重启时需要重放的命令数量很多。此时需要aof重写,即在一段时间后将备份文件删除并且重新进行一次备份,以减少备份文件中的命令数量和大小。aof重写使用bgrewriteaof命令来实现。

  • fsync命令

在向aof文件中写入备份命令时,若突然宕机则会发生写入失败,此时要使用linux提供的glibc命令。这个命令能强制将内存中的数据刷新到磁盘中,如果Redis进程实时执行这个函数,那么就不会发生写入丢失,但是由于fsync命令执行很耗费时间,所以Redis默认每秒执行一次。

appendfsync always #每次有数据修改发生时都会写入AOF文件,这样会严重降低Redis的速度
appendfsync everysec #每秒钟同步一次,显示地将多个写命令同步到硬盘
appendfsync no #让操作系统决定何时进行同步

  • 使用增量备份的缺点

增量备份文件中存储的是写入命令,在Redis启动时重放命令的时间较长,备份文件占用空间较大

3 Redis 4.0 混合式持久化

Redis重启时很少使用RDB文件来载入数据,因为可能发生大量的数据失效情况,而采用AOF重放的方式又会耗费很长时间,所以在Redis 4.0中为了解决这个问题,开始采用混合持久化的方式,即将dump.rdb文件和appendonly.aof文件放在一起,但是aof文件只保留了rdb持久化之后的那部分命令,所以aof文件会小很多。
在Redis重启时,先加载rdb中的二进制数据,然后使用aof对后续的那部分数据进行重放。

Redis进阶深度历险:核心原理与高阶实战全解析 save 900 1 # 15分钟内至少1次更改save 300 10 # 5分钟内至少10次更改save 60 10000 # 1分钟内至少10000次更改Redis内部维护一个计时器数组,记录每个规则上次满足的时间。每当有写命令执行,服务器会更新dirty计数器,并检查是否满足任一save条件。若满足,则自动执行BGSAVE。 阅读详情

相关推荐

Redis - Redis深度历险.pdf.zip

Redis - Redis深度历险.pdf.zip

膜拜!这份技术点拉满的Redis深度历险笔记,价值百万!

前言 Redis,是互联网技术架构在存储系统中使用最为广泛的中间件,它也是工程师技术面试中最喜欢问的技能之一,特别是那些优秀的、竞争激烈的大型互联网公司(比如 Twitter、新浪微博、阿里云、腾讯云、淘宝、知乎等),通常要求面试者不仅仅掌握Redis基础使用,更要求深层理解Redis内部实现的细节原理。毫不夸张地说,能把Redis的知识点全部吃透,你的半只脚就已经踏进心仪公司的大门! 所以小编给大家整理了这份《Redis深度历险》文档,并且将从目录,前言,主要内容,这三个部分大家讲解这本文档,同时希

bieber007的博客 1491

Redis深度历险:核心原理和应用实践.zip

Redis深度历险:核心原理和应用实践 比较稀缺的紫瑶

《Redis深度历险》笔记

redis使用、原理、数据结构

qq_35572013的博客 847

Redis深度历险:核心原理和应用实践.png

总结《Redis深度历险:核心原理和应用实践》的xmind图

Redis深度历险:核心原理和应用实践【TALKDATA推荐】1

声明:此文档源自钱文品老师所著《Redis深度历险:核心原理和应用实践》,只供个人学习所用,不得私自用于商业用途Redis 深度历险:核心原理与应用实践 | 钱

redis深度历险 pdf_Redis深度历险

说明:本文章为书籍《Redis深度历险》的读书笔记,如有侵权,马上删除,不承担任何法律责任。目录:应用原理集群拓展源码应用内容列表:ZSET,分布式锁,HyperLogLog,布隆过滤器1.ZSET 有序列表 sorted set形式value 1 - score 1value 2 - score 2value 3 - score 3数据结构value -> score : HashMaps...

weixin_39787792的博客 1537

1006. 换个格式输出整数 (15)-PAT乙级真题

1006. 换个格式输出整数 (15)让我们用字母B来表示“百”、字母S表示“十”,用“12…n”来表示个位数字n(<10),换个格式来输出任一个不超过3位的正整数。例如234应该被输出为BBSSS1234,因为它有2个“百”、3个“十”、以及个位的4。输入格式:每个测试输入包含1个测试用例,给出正整数n(<1000)。输出格式:每个测试用例的输出占一行,用规定的格式输出n。输入样例1...

柳婼 の blog 2245

Redis深度历险-Redis持久化

本文大部分内容引自《Redis深度历险:核心原理和应用实践》,感谢作者!!! Redis持久化的方式 1、快照方式持久化,将内存中数据的二进制序列化形式备份到磁盘上,数据在存储上非常紧凑 2、AOF日志,记录内存数据修改的指令记录文本,在长期运行后AOF日志的体积将会变得无比庞大,数据库重启时加载AOF日志进行指令重放,这个时间就会很漫长。所以要定期进行AOF重写,给AOF日志进行瘦身 快照原理 Redis在服务器处理请求的时候还需要进行内存快照,内存快照要求Redis必须进行

樊先知樊先知的博客 233

RuoYi(分离版) 使用代码生成器添加子模块(idea版)

文章目录准备一、使用代码生成器1.数据库2.导入表并生成代码二、导入代码文件1.新建一个模块2.导入zip代码文件3.模块环境配置添加菜单和访问地址总结 准备 前提要把系统启动起来,部分教程可以参考这边文章若依框架RuoYi前后端分离项目导入IDEA及运行启动 但是完全参考这篇文章还是不能把项目启动起来,因为这篇文章没有说明数据库。 我是用的是本地数据库,采用xampp+Navicat的组合来部署和访问数据库。打开Navicat,连接并创建数据库ry-vue并导入数据脚本ry_20191008.sql,q

dream_coke的博客 1万+

《Redis深度历险核心原理与应用实践》读书笔记

目录前言基础和应用篇Redis可以做什么5种基础数据结构位图HyperLogLog布隆过滤器限流附件的人或物(GEO)scan原理篇集群篇拓展篇保护Redis 前言 《Redis深度历险核心原理与应用实践》是掌阅服务端技术专家钱文品所著,看完后感觉有点东西。书马上要还了,避免忘记,在此与自己所学结合做个笔记。不涉及源码篇(因为这块没怎么看懂)。 基础和应用篇 Redis可以做什么 1、缓存最近热帖内容(hash)。 2、分布式锁(hash、string)。 3、记录帖子的点赞数,评论数和点击数(has

愤怒的苹果ext的博客 1489

SEED-VIG数据集实战:5步搞定驾驶员疲劳检测模型(附Python代码)

本文提供了一份基于SEED-VIG数据集的驾驶员疲劳检测模型实战指南。通过五个核心步骤——数据准备、特征提取、模型训练、优化评估及部署思路,详细讲解了如何利用脑电信号构建分类器,并附有完整的Python代码,帮助开发者快速上手这一智能座舱关键技术。

w1x2y3的博客 263

Redis深度历险:掌握核心原理与应用实践

Redis深度历险:掌握核心原理与应用实践 去发现同类优质开源项目:https://gitcode.com/ 项目介绍 在当今大数据和云计算的时代,高效的数据存储和处理技术显得尤为重要。Redis,作为一种高性能的键值存储系统,凭借其卓越的性能和丰富的功能,成为了众多开发者和企业的首选。为了帮助广大开发者深入理解和掌握Redis的核心原理与应用实践,我们特别推出了《Redis深度历险:核心原理和应...

gitblog_06645的博客 357

ADC选型实战:从参数指标到精准应用的工程指南

本文深入解析ADC(模数转换器)选型的关键参数与实战技巧,涵盖分辨率、转换误差等核心指标,并提供高精度温度测量、高速数据采集等五大应用场景的选型指南。通过实际案例和代码示例,详细讲解校准方法、功耗优化策略及常见问题排查,帮助工程师实现从参数指标到精准应用的工程实践。

weixin_29166013的博客 328

硬件开发流程

研发流程在一个有一定规模的企业中起到了非常重要的作用,也是一个产品或者项目成功量产出货依赖的平台体系,作为工程师如果想要走的更远,就必须了解流程体系,了解如何对产品的开发质量进行更好的管控。...

weixin_44126796的博客 8386

《Redis深度历险》读后总结

最近疫情好多了,好多城市都开始清零。大家还是不要大意,在家再坚持一段时间。疫情期间,有很多安静的时间,可以用来看平时没时间看的书。趁着这段时间,来个漂亮的弯道超车(^^) 好了,回归正题。今天读完了掌阅科技技术专家老钱的《Redis深度历险》。书不错,学到了很多东西。好记性不如烂笔头,在此记录一下,方便记忆。 全书共分为五章 基础和应用篇;原理篇;集群篇;拓展篇;源码篇 基础和应用篇,主要介绍了一...

qq_39839075的博客 412

华为2288H V5服务器断电后‘趴窝’?别慌,手把手教你用SmartKit+BMC修复工具搞定

本文详细介绍了华为2288H V5服务器在断电后无法启动的修复方法,通过SmartKit和BMC修复工具进行故障诊断与修复。文章提供了从工具获取、安装到具体修复流程的完整指南,帮助运维人员快速恢复服务器运行,并给出了后续加固与预防措施,确保服务器稳定运行。

weixin_30575517的博客 298

Redis深度历险-简单的原理技术

介绍了Redis的IO模型,通信协议,持久化技术,管道,事务,小对象压缩技术等待

qq_46863837的博客 1113

LPDDR6 Efficiency Mode 技术探讨

LPDDR6 Efficiency Mode 技术探讨

zilan23的博客 1164

复分析 阿尔福斯(Ahlfors) 第三版答案 英文

答案分为十章,有部分习题没有答案,全英文复分析阿尔福斯(Ahlfors) 第三版答案

Redis深度历险:核心原理和应用实践

Redis深度历险:核心原理和应用实践 去发现同类优质开源项目:https://gitcode.com/ 欢迎来到Redis深度历险:核心原理和应用实践资源下载页面!这里为您提供了《Redis深度历险:核心原理和应用实践》的压缩文件,内含深入浅出的Redis知识分享。 文件简介 《Redis深度历险:核心原理和应用实践》是一份详尽的资源,涵盖了Redis的核心原理以及在实际应用中的各种实践方法。这...

gitblog_06711的博客 324

SAP B1中文培訓教材_SDK

公司内部培训资料,对开发工具 ,DIAPI, UIAPI,Add-ON有详细解说

redis深度历险 pdf_必传之作!Alibaba内部出品Redis深度笔记及源码宝典

前言在开源界,高性能服务的典型代表就是Nginx和Redis。纵观这两个软件的源码,都是非常简洁高效的,也都是基于异步网络I/O机制的,所以对于要学习高性能服务的程序员或者爱好者来说,研究这两个网络服务的源码是非常有必要的。Nginx目前市面上的书籍很多,但是Redis确实寥寥无几。所以小编给大家整理了两份Redis学习文档,并且将从目录,前言,主要内容,这三个部分大家讲解这本文档,同时希望对各位...

weixin_39980234的博客 830

NTscan扫描工具

ntscan是一个扫描器,可以扫描没有密码和弱密码的共享,先到配置文件中填写猜测的用户名和密码,扫描过程中右侧出现的是扫描日志。

华为的C语言编程规范.pdf

华为技术有限公司内部技术规范。本规范制定了编写C语言程序的基本原则、规则和建议。从代码的清晰、简洁、可测试、安全、程序效率、可移植各个方面对C语言编程作出了具体指导。

redis深度历险 pdf_膜拜!这份技术点拉满的Redis深度历险笔记,价值百万

前言Redis,是互联网技术架构在存储系统中使用最为广泛的中间件,它也是工程师技术面试中最喜欢问的技能之一,特别是那些优秀的、竞争激烈的大型互联网公司(比如 Twitter、新浪微博、阿里云、腾讯云、淘宝、知乎等),通常要求面试者不仅仅掌握Redis基础使用,更要求深层理解Redis内部实现的细节原理。毫不夸张地说,能把Redis的知识点全部吃透,你的半只脚就已经踏进心仪公司的大门!所以小编给大家...

weixin_39968823的博客 273

redis 深度历险:核心原理与应用实践_编程好书推荐《Redis 深度历险:核心原理与应用实践》...

今天看到一本书,叫《Redis 深度历险:核心原理与应用实践》,作者叫钱文品(老钱),目前在掌阅科技出任资深开发工程师,这本书对redis的剖析还是挺深入的对redis感兴趣的朋友可以买来看看目录如下:第1篇 基础和应用篇 / 11.1 授人以鱼不如授人以渔 / 11.1.1 由 Redis 面试想到的 / 11.1.2 本书的内容范围 / 21.1.3 Redis 可以做什么 / 31.1.4 ...

weixin_39806065的博客 158

redis深度历险 pdf_膜拜!这份技术点拉满的Redis深度历险笔记,价值百万!

前言Redis,是互联网技术架构在存储系统中使用最为广泛的中间件,它也是工程师技术面试中最喜欢问的技能之一,特别是那些优秀的、竞争激烈的大型互联网公司(比如 Twitter、新浪微博、阿里云、腾讯云、淘宝、知乎等),通常要求面试者不仅仅掌握Redis基础使用,更要求深层理解Redis内部实现的细节原理。毫不夸张地说,能把Redis的知识点全部吃透,你的半只脚就已经踏进心仪公司的大门!所以小编给大家...

weixin_39851008的博客 246

Redis—《Redis 深度历险:核心原理与应用实践》学习

Redis

lercent的博客 1271
上一篇: Golang表格驱动测试
下一篇: 剑指Offer(1)-[BinaryTree]重建二叉树
BoringRong
BoringRong 领域专家: 后端开发技术领域 领域专家: 后端开发技术领域
博客等级 码龄9年 2万+粉丝 386原创
评论
成就一亿技术人!
拼手气红包6.0元
还能输入1000个字符
 
 条评论被折叠 查看
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付:10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

BoringRong

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付:¥1
获取中
扫码支付

您的余额不足,请更换扫码支付或充值

打赏作者

实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值