关于 Redis 缓存的三个一定要知道的问题哟!

黄色手机app应用介绍网站模板 立即下载

点击上方“芋道源码”,选择“设为星标”

管她前浪,还是后浪?

能浪的浪,才是好浪!

每天 8:55 更新文章,每天掉亿点点头发...

源码精品专栏

 

来源:cnblogs.com/xiaowei123/p/13211403.html

  • 缓存穿透

    • 缓存空对象

    • 布隆过滤器

  • 缓存击穿

  • 缓存雪崩

二哈最近都没看Redis,现在回来温习下,现在从Redis的三大缓存开始重新探一探有多深有多浅(* ^▽^ *)

img

让我来开始知识的醍醐灌顶把!是时候表演真正的技术了。(哔哔哔哔....)

img

铁子们,看在二哈这么卖力的份上,如果觉得这里对你有帮助的话,请动动你的小手,比个❥(^ _-)爱心推荐哟。

接下来就开始我们的Redis的三大缓存问题之旅,让我们坐在上二哈的小飞船游一游这圣女峰。

img

在Redis缓存中有三个必须要知道概念:缓存穿透,缓存击穿和缓存雪崩。

缓存穿透

那什么是缓存穿透,它就是指当用户在查询一条数据的时候,而此时数据库和缓存却没有关于这条数据的任何记录,而这条数据在缓存中没找到就会向数据库请求获取数据。它拿不到数据时,是会一直查询数据库,这样重组数据库的访问造成很大的压力。

如:用户查询一个id = -1的商品信息,一般数据库id值都是从1开始自增,很明显这条信息是不在数据库中,当没有信息返回时,会一直向数据库查询,给当前数据库的造成很大的访问压力。

这时候我们要想一想,该如何解决这个问题呢?o(╥﹏╥)o

一般我们可以想到从缓存开始出发,想如果我们给缓存设置一个如果当前数据库不存在的信息,把它缓存成一个空对象,返回给用户。

^ _ ^没错,这是一个解决方案,也就是我们常说的缓存空对象(代码维护简单,但是效果不是很好)。

Redis也为我们提供了一种解决方案,那就是布隆过滤器(代码维护比较复杂,效果挺好的)。

那接下来,二哈先解释下这两种方案:

缓存空对象

那什么是缓存空对象呀,二哈!别急,缓存空对象它就是指一个请求发送过来,如果此时缓存中和数据库都不存在这个请求所要查询的相关信息,那么数据库就会返回一个空对象,变成这个空对象和请求关联起来存到缓存中,当下次还是这个请求过来的时候,这时缓存就会命中,就直接从缓存中返回这个空对象,这样可以减少访问数据库的压力,提高当前数据库的访问性能。我们接下来可以看下面这个流程呀〜

img

这时候,我们就会问了呀〜,如果大量不存在的请求过来,那么这时候缓存岂不是会缓存很多空对象了吗~~~

没错哦!这也是使用缓存空对象会导致一个问题:如果时间一长这样会导致缓存中存在大量空对象,这样交替会占用很多的内存空间,还会浪费很多资源呀!。那这有没有什么可以解决的方法呢?我们来想一想:我们可以将这些对象在重启之后清理下不久可以了吗〜

嗯嗯,没错!在想想Redis里是不是给我们提供了有关过期时间的命令呀(^▽^),这样我们可以在设置空对象的时间,顺便设置一个过期时间,就可以解决个问题了呀!

setex key seconds valule:设置键值对的同时指定过期时间(s)

在Java中直接调用API操作即可:

redisCache.put(Integer.toString(id), null, 60) //过期时间为 60s

布隆过滤器

那布隆过滤器是不是不是一个过滤器,过滤东西的呀!哎呀,你太聪明了,没错它就是用来过滤东西的,它是一种基于概率的数据结构,主要使用爱判断当前某人一个元素是否在该集合中,运行速度快。我们也可以简单理解为是一个不怎么精确的set结构(set具有去重的效果)。但是有个小问题是:当你使用它的contains方法去实际上布隆过滤器不是特别不精确,但是只要参数设置的合理,它的精确度可以控制的相对足够精确,只会有小小的误判概率(这是可以接受的呀〜)。当布隆过滤器说某个值存在时,这个值可能不存在;当它说不存在时,那就肯定不存在。

这里有个典型的例子呀,来自钱大:

打个比方,当它说不认识你时,肯定就不认识;当它说见过你时,可能根本就没见过面,不过因为你的脸跟它认识的人中某脸比较相似(某人些熟脸的系数组合),所以误判以前见过你。在上面的使用场景中,布隆过滤器能准确过滤掉那些已经看过的内容,那些没有看过的新内容,它也会过滤掉极小部分(误判),但是大部分新内容它都能正确识别。这样就可以完全保证推荐给用户的内容都是无重复的。

说了这么久,那布隆过滤器到底有什么特点呢:

特色吗,多多来让一个个跟你吹吹(吹到你怀疑人生(≧∇≦)ノ)

  1. 一个非常大的二进制位数发行(发行中只存在0和1)

  2. 拥有多个个哈希函数(哈希函数)

  3. 在空间效率和查询效率都非常高

  4. 布隆过滤器不会提供删除方法,在代码维护上比较困难。

每个布隆过滤器对应到Redis的数据结构里面就是一个大型的位置数组和几个不一样的无偏hash函数。所谓无偏就是能够把元素的hash值算得比较均匀。

img

向布隆过滤器中添加key时,会使用多个hash函数对key进行hash算得一个整体索引值然后对位长度进行取模运算得到一个位置,每个hash函数都会算得一个不同的位置。再(每一个键都通过一些的hash函数映射到一个巨大的位置上,映射成功后,会在把位置上对应的位置改成)为1。)

那为什么布隆过滤器会存在误判率呢?

误判吗?人生哪有不摔跤,只要锄头挥得好,照样能挖到。(咳嗽咳,说偏了...)

其实它会误判是如下这个情况:

img

当key1和key2映射到位上方的位置为1时,假设这时候来了个key3,要查询是不是在里面,恰好key3对应位置也映射到了这之间,那么布隆过滤器会认为它是存在的,这时候就会产生误判(因为明明key3是不在的)。

O(∩_∩)O哈哈〜,这时候你会问了:如何提高布隆过滤器的准确率呢?

要提高布隆过滤器的准确率,就要说到影响它的三个重要因素:

  1. 哈希函数的好坏

  2. 存储空间大小

  3. 哈希函数个数

hash函数的设计也是一个十分重要的问题,对于好的哈希函数能大大降低布隆过滤器的误判率。

(这就好比优秀的配件之所以能够运行这么顺畅就在于其内部设计的得当。)

同时,对于一个布隆过滤器来说,如果它的位置重叠尺寸的话,那么每个键通过hash函数映射的位置会变得稀疏很多,不会那么微小,有利于提高布隆过滤器的准确率。同时,对于一个布隆过滤器来说,如果键通过许多哈希函数映射,那么在位上上就会有很多位置有标志,这样当用户查询的时候,在通过布隆过滤器来找的时候,误判率也会相应降低。

对于其内部原理,有兴趣的同学可以看看关于布隆过滤的数学知识,里面有关于它的设计算法和数学知识。(其实也挺简单〜)

缓存击穿

缓存击穿是指有某个键经常被查询,经常被用户特殊关怀,用户非常love它(^▽^),也就类比“熟客”或一个键经常不被访问。但是这时候,如果这个键在缓存的过期时间失效的时候或者这是个冷门键时,这时候突然有大量有关这个键的访问请求,这样会导致大并发请求直接穿透缓存,请求数据库,瞬间对数据库的访问压力增大。

归纳起来:造成缓存击穿的原因有两个。

(1)一个“冷门”键,突然被大量用户请求访问。

(2)一个“热门”键,在缓存中时间恰好过期,这时有大量用户来进行访问。

img

对于缓存击穿的问题:我们常用的解决方案是加锁。对于密钥过期的时候,当密钥要查询数据库的时候加上一把锁,这时只能让第一个请求进行查询数据库,然后把从数据库中查询到的值存储到缓存中,对于其余的相同的键,可以直接从缓存中获取即可。

如果我们是在单机环境下:直接使用常用的锁即可(如:Lock,Synchronized等),在分布式环境下我们可以使用分布式锁,如:基于数据库,基于Redis或者zookeeper的分布式锁。

img

缓存雪崩

缓存雪崩是指在某人一个时间段内,缓存集中过期失效,如果这个时间段内有大量请求,而查询数据量巨大,所有的请求都会达到存储层,存储层的调用量会暴增,引起数据库压力过大甚至停机机。

原因:

  1. Redis突然停机机

  2. 大部分数据错误

举个例子理解下吧:

例如我们基本上都经历过购物狂欢节,假设商家聚会23:00-24:00商品打骨折促销活动。程序小哥哥在设计的时候,在23:00把商家打骨折的商品放到缓存中,并通过redis的expire设置了过期时间为1小时。这个时间段许多用户访问这些商品信息,购买等等。但是刚好到了24:00点的时候,恰好还有很多用户在访问这些商品,这时候对这些商品的访问都会落到数据库上,导致数据库要抗住巨大的压力,稍有不慎会导致,数据库直接停机机(over)。

当商品没有失效的时候是这样的:

img

当缓存GG(失效)的时候却是这样的:

img

对于缓存雪崩有以下解决方案:

(1)redis高可用

redis有可能挂掉,多增加几台redis实例,(一主多从或者多主多从),这样一台挂掉之后其他的还可以继续工作,其实就是建造的。

(2)限流降级

在缓存无效后,通过加锁或者通过堆栈来控制读数据库写缓存的线程数量,对某个键只允许一个线程查询数据和写缓存,其他线程等待。

(3)数据预热

数据加热的意味着就是在正式部署之前,我先把可能的数据先预先访问一遍,这样部分可能大量访问的数据就会加载到缓存中。在即将发生的大并发访问前手动触发加载缓存不同的键。

(4)不同的过期时间

设置不同的过期时间,让缓存重复的时间点正确均匀。

(学者的小伙伴,可以帮忙点个推荐(*  ̄3)(ε ̄ *)谢谢呀,(づ ̄3 ̄)づ╭❤〜二哈爱你们)



欢迎加入我的知识星球,一起探讨架构,交流源码。加入方式,长按下方二维码噢:

已在知识星球更新源码解析如下:

最近更新《芋道 SpringBoot 2.X 入门》系列,已经 20 余篇,覆盖了 MyBatis、Redis、MongoDB、ES、分库分表、读写分离、SpringMVC、Webflux、权限、WebSocket、Dubbo、RabbitMQ、RocketMQ、Kafka、性能测试等等内容。

提供近 3W 行代码的 SpringBoot 示例,以及超 4W 行代码的电商微服务项目。

获取方式:点“在看”,关注公众号并回复 666 领取,更多内容陆续奉上。

兄弟,艿一口,点个赞!????

黄色APP软件介绍网页模板 立即下载

相关推荐

大模型呼叫中心场景分享之六:大模型外呼IT运维告警——智能监控与自动化响应的未来

在数字化运维(IT Operations)中,实时监控系统健康状态并及时响应告警是保障业务连续性的关键。传统的IT告警方式(如邮件、短信、钉钉/企业微信通知)存在信息过载、响应延迟、人工处理效率低等问题。而大模型(LLM)与语音技术(TTS/ASR)的结合,为IT运维告警提供了更智能的解决方案——大模型外呼告警系统。大模型外呼告警系统正在重新定义IT运维的效率和体验。通过实时语音交互+智能自动化,企业能够将平均故障修复时间(MTTR)从小时级缩短至分钟级。

开源呼叫中心系统FreeIPCC的博客 926

【python】采集每日必看黄色软件数据~

大家早好、午好、晚好吖 ❤ ~欢迎光临本文章。

weixin_62853513的博客 91万+

MATLAB配置MinGW编译器的完整指南

本文提供了在Windows系统上为MATLAB配置MinGW编译器的完整指南。详细介绍了通过MATLAB附加功能管理器在线安装和手动离线安装两种核心方法,并重点说明了如何解决常见的“未找到支持的编译器”等错误。指南包含从版本检查、环境变量配置到最终使用mex命令验证的每一步,帮助用户顺利完成MATLAB与MinGW的集成,以支持C/C++代码编译。

weixin_29031057的博客 265

十个经典免费软件和五★级网站!

十个经典免费软件和五★级网站!◆ 软件非常实用,都是“免费版本”,  ghost , 诺顿杀毒 等经典软件哪里皆可下载到, 就没列出。◆ 推荐的网站则是very出色实用! 软件1.代理甭猎手 v1.0                (179 KB 绿色)推荐指数: ★★★★★            介绍: 全称是代理不用猎手,简化了烦杂的搜索工作,运行起来你就可以直接设置,导出代理了. 同时只是定

糯米糊糊的专栏 156万+

从零开始解析N-CMAPSS数据集:航空发动机健康管理的入门指南

本文详细解析了N-CMAPSS数据集在航空发动机健康管理中的应用,从数据集的构成、关键变量到实际数据分析方法,为初学者提供了全面的入门指南。通过Python代码示例,展示了如何加载、探索和建模这一复杂数据集,帮助读者掌握航空发动机性能预测的核心技术。

weixin_29063979的博客 325

termux 安装 rockylinux

往找最新的文件目录,选择ARM版本的image。或者直接查看目录或者国内阿里云镜像,按照cpu架构(安卓9手机一般是aarch64arm最新架构),获取镜像地址,以及checksum里的SHA256信息更新到以下rocky9.sh脚本,如果不需要直接使用即可。

欢迎来到别往的博客 984

免费软件不比付费软件逊色半分之94款免费软件

最好的网页浏览器  FireFox。FireFox是一款非常受欢迎的浏览器,它有比IE更高的安全性与用户可定制性,能自动升级,快速标签浏览,更好的隐私保密设置,一个整合的搜索框,还有书签,而这些仅仅只是Firefox最基本的功能,你还可以下载不计其数的插件来扩展它的功能。  FireFox主页及下载地址:http://www.mozilla.com/firefox/下载:http:

lovenjoy的专栏 162万+

电流镜设计实战:从基础到高级技巧(附常见问题解决方案)

本文从工程实战角度,系统讲解了电流镜设计从基础原理到高级技巧的全过程。深入剖析了匹配精度、输出阻抗等核心矛盾,并详细介绍了共源共栅(Cascode)结构如何平衡电压裕度与输出阻抗。文章还重点探讨了工艺偏差、版图应力效应等实战中的“隐形杀手”,并提供了常见问题的解决方案与调试技巧,旨在帮助工程师设计出鲁棒性更强的模拟电路。

blockchain9miner的博客 735

关于Redis缓存,这三个问题一定要知道!

作者:奔跑的奶酪二哈cnblogs.com/xiaowei123/p/13211403.html二哈最近都没看Redis,现在回来温习下,现在从Redis的三大缓存开始重新探一探有多深有...

Java知音 529

VOS中历史话单显示通话会话超时中断详解

假设一种场景:  主叫拨打被叫,主叫方异常离线,被叫方接听,被叫方发送200ok至VOS,VOS传送200ok给主叫,但是主叫方未给出正常ack回应,VOS重发几次后(根据SIP参数设定的重发机制),然后VOS服务器会中断话务,历史话单终止原因为会话超时。 参考呼叫分析信令如下图: ...

非著名运维的博客 5017

大模型知识边界探索:LLM设计的极限测试

最优化理论是数学中的一个分支,主要研究如何从给定的一组约束条件下找到最优解。目标函数:定义了需要优化的指标,可以是最大化或最小化。约束条件:定义了在优化过程中需要满足的限制条件。无约束优化:目标函数和约束条件都不存在。有约束优化:目标函数存在,但存在约束条件。多目标优化:同时需要优化多个目标函数。极限测试(Ultimate Test)是一种系统性的方法,用于评估大型模型(如LLM)在极端条件下的性能和稳定性。极端数据分布:与模型训练数据分布显著不同的数据集。极端计算资源。

AI天才研究院 437

关于Redis缓存的三个一定要知道的问题哟!

点击上方「蓝字」关注我们二哈最近都没看Redis,现在回来温习下,现在从Redis的三大缓存开始重新探一探有多深有多浅(*^▽^*)让我来开始知识的醍醐灌顶吧!是时候表演真正的技术了。(...

天行健,君子以自强不息;地势坤,君子以厚德载物。 190

从 Junior 到 Lead:ABAP 开发者进阶路线图与真实项目练级法

本文拆解了ABAP工程师从初级到高级的成长路径,强调能力提升依赖于可复用经验的积累。对于初级开发者,建议夯实ABAP Dictionary、内表处理和数据库思维三大基础,培养数据流与规则层的结构化思维,并逐步掌握面向对象编程。中级阶段应注重代码可维护性,通过单元测试和Clean ABAP规范提升工程质量。文章指出,ABAP开发者需要学会筛选学习重点,建立知识地图,并重视团队协作中的代码可读性。关键在于将碎片知识整合为可迁移的模型,而非盲目追求新技术。

2007 年 ~ 2025 年,深耕 SAP 技术 18 年 179

redis映射的概念_关于Redis缓存,这三个问题一定要知道!

二哈最近都没看Redis,现在回来温习下,现在从Redis的三大缓存开始重新探一探有多深有多浅(^▽^)让我来开始知识的醍醐灌顶把!是时候表演真正的技术了。(哔哔哔哔....) 铁子们,看在二哈这么卖力的份上,如果觉得本文对你有帮助的话,请动动你的小手,比个❥(^_-)爱心推荐哟。接下来就开始我们的Redis的三大缓存问题之旅,让我们坐上二哈的小飞船游一游这圣女峰。在Redis缓存中有三个必须要知...

weixin_42507297的博客 102

怀旧版电脑GBC模拟器

再现原版GBC掌机的界面,电脑运行连游戏界面都一样大小,很怀旧,很真实,(英文版)强烈推荐,很小的文件,很难才找到的。

霍尼韦尔SoftMaster使用说明

霍尼韦尔SoftMaster使用说明

this.form.setfieldsvalue如果要设置数组怎么设置_关于Redis缓存,这三个问题一定要知道!...

最近都没看Redis,现在回来温习下,现在从Redis的三大缓存开始重新探一探有多深有多浅(*^▽^*) 让我来开始知识的醍醐灌顶把!是时候表演真正的技术了。(哔哔哔哔....) 接下来就开始我们的Redis的三大缓存问题之旅,让我们坐上二哈的小飞船游一游这圣女峰。在Redis缓存中有三个必须要知道概念:缓存穿透、缓存击穿和缓存雪崩。缓存穿透那什么是缓存穿透,它就是指当用户在查询一条数据的时候,而...

weixin_39790102的博客 1127

锂电池充电器电路设计 里面有电路

锂电池充电器电路设计 里面有电路 3.7V升压到5V电路设计。

Redis——三种缓存问题

讲解Redis中常见的三种缓存问题,对每个问题给出具体的解决方案,在不同的场景使用相应的解决措施。

一心同学的博客 5775

文档:亲测可用解决vnc灰屏,黑屏,鼠标大黑叉情况

主要解决vnc-viewer灰屏,黑屏,鼠标大黑叉等现象,详细见文档。

Redis 面试一定要知道的 3 个 问题!

作者:_BKing地址:cnblogs.com/xiaowei123/p/13211403.html最近都没看Redis,现在回来温习下,现在从Redis的三大缓存开始重新探一探有多深有...

emprere的博客 5094

关于Redis缓存,这3个问题一定要知道!

最近都没看Redis,现在回来温习下,现在从Redis的三大缓存开始重新探一探有多深有多浅(^▽^) 让我来开始知识的醍醐灌顶把!是时候表演真正的技术了。(哔哔哔哔....) 铁子们,看在这么卖力的份上,如果觉得本文对你有帮助的话,请动动你的小手,点个赞哟。 接下来就开始我们的Redis的三大缓存问题之旅,让我们坐上小飞船游一游这圣女峰。 在Redis缓存中有三个必须要知道概念:缓存穿透、缓存击穿和缓存雪崩。 缓存穿透 那什么是缓存穿透,它就是指当用户在查询一条数据的时候,而此时数据

Java烂猪皮 362
上一篇: 卸载Notepad++!事实已证明,它更牛逼……
下一篇: SQL 优化极简法则,还有谁不会?
公众号-芋道源码
博客等级 码龄10年 1639粉丝 377原创
评论
成就一亿技术人!
拼手气红包6.0元
还能输入1000个字符
 
 条评论被折叠 查看
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付:10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值