拜托,我也不想跪着的,但这份redis深度笔记也太牛了

机器学习模型上线后如何保障系统稳定与可信 机器学习模型部署不是终点,而是系统性工程挑战的起点。从数据漂移、特征时效性到服务熔断、决策可解释性,生产环境中的稳定性依赖于鲁棒架构、精细化监控与可审计治理。本文聚焦模型在真实业务场景(如金融风控、实时推荐)中面临的延迟抖动、子群体失效、人工覆盖激增等典型问题,深入解析特征契约管理、分层熔断机制、结构化决策日志与对抗性验证等关键实践。内容涵盖ML系统全生命周期的性能确定性保障、漂移检测方法论及合规就绪设计,为构建高可用、可追溯、可演进的AI生产系统提供落地路径。 阅读详情

Redis基本常识

Redis是当前比较热门的NoSQL框架之一
它是一个开源的、使用ANSI C语言编写的key-value存储系统(区别于MySQL的二维表格形式存储)
和Memcache类似,但很大程度补偿了Memcache的不足,Redis数据都是缓存在计算机内存中,不同的是,Memcache只能将数据缓存到内存中,无法自动定期写入硬盘,这就表示,一断电或重启,内存清空,数据丢失

Redis常见的业务使用场景

场景1:取最新N个数据

例如典型的取网站文章的最新评论,则可以将最新的5000条评论ID放在Redis的List集合中,并将超出集合部分从数据库获取

场景2:应用于各类排行榜,取TOP N的操作

​ 这个场景与上面取最新N个数据需求的不同之处在于,前面操作以时间为权重,而这个TOP N是以某个条件为权重,比如按点赞的次数排序,可以使用Redis的sorted set,将要排序的值设置成sorted set的score,将具体的数据设置成相应的value,每次只需要执行一条ZADD命令即可。

Redis zadd,命令用于将一个或多个成员元素及其分数值加入到有序集当中(简单了解即可)

如果某个成员已经是有序集的成员,那么更新这个成员的分数值,并通过重新插入这个成员元素,来保证该成员在正确的位置上
分数值可以是整数值或双精度浮点数。
如果有序集合 key 不存在,则创建一个空的有序集并执行 zadd 操作
当 key 存在但不是有序集类型时,返回一个错误

场景3:需要精准设定过期时间的应用

​ 比如可以把上面场景2说到的sorted set的score值设置成过期时间的时间戳,那么就可以简单地通过过期时间排序,定时清除过期数据了,不仅是清除Redis中的过期数据,你完全可以把Redis里这个过期时间当成是对数据库中数据的索引,用Redis来找出哪些数据需要过期删除,然后再精准地从数据库中删除相应的记录

场景4:计数器应用

Redis的命令都是原子性的,你可以轻松地利用INCR,DECR命令来构建计数器系统

命令:
incr key 对key存储的value值+1,并将最终的结果作为返回值;
decr key 对key存储的value值-1,并将最终的结果作为返回值;

场景5:Uniq操作,获取某段时间所有数据排重值

这个使用Redis的set数据结构最合适了,只需要不断地将数据往set中扔就行了,set意为集合,所以会自动排重

场景6:实时系统,反垃圾系统

通过上面场景5说到的set功能,后台可以获取一个终端用户此时是否进行了某个操作,可以找到其操作的集合并进行分析统计对比等。

场景7:缓存

将数据直接存放到内存中,性能优于Memcached,数据结构更多样化

现在互联网公司和一些创业公司都要用到Redis,像亚马逊、谷歌、阿里、腾讯都要使用,可见精通Redis使用真的很有必要。
所以,今天则分享出腾讯云大神亲自码出的“redis深度笔记”,笔记内容没有讲一句废话,全篇看下来都是精华!

PART1:Redis深度笔记开篇
1.Redis可以用来做什么?

  • 由Redis面试想到的
  • Redis可以做什么?

     

2.Redis基础数据结构

  • Redis安装
  • Redis基础的数据结构
  • 容器型数据结构的通用规则
  • 关于Redis使用的一些思考

     

PART2:Redis的应用总结
1.分布式锁

  • 分布式锁
  • 超时问题
  • 可重入性

     

2.延时队列

  • 异步消息队列?
  • 队列空了怎么办?
  • 队列延迟
  • 空闲连接自动断开
  • 锁冲突处理
  • 延时队列的实现
  • 进一步优化

     

3.位图

  • 基本使用
  • 统计和查找
  • 魔术指令 bitfield

     

4.HyperLogLog

  • 使用方法
  • pfadd这个pf是什么意思?
  • pfmerge适合什么场合用?
  • 注意事项
  • HyperLogLog实现原理
  • pf的内存占用为什么是12k?

     

5.布隆过滤器

  • 布隆过滤器是什么?
  • Redis中的布隆过滤器
  • 布隆过滤器的基本使用
  • 注意事项
  • 布隆过滤器的原理
  • 空间占用估计
  • 实际元素超出时,误判率会怎样变化?
  • 用不上Redis4.0怎么办?
  • 布隆过滤器的其他应用

     

6.简单限流

  • 如何使用Redis来实现简单限流策略?

     

7.漏斗限流

  • Redis-Cell
  • 一些思考

     

8.GeoHash

  • 用数据库来算附近的人
  • GeoHash算法
  • Redis的Geo指令基本使用

     

9.Scan

  • scan基础使用
  • 字典的结构
  • scan遍历顺序
  • 字典扩容
  • 对比扩容缩容前后的遍历顺序
  • 渐进式rehash
  • 更多的scan指令
  • 大Key扫描

     

PART3:Redis的原理
1.线程IO模型

  • 非阻塞IO
  • 事件轮询(多路复用)
  • 指令队列
  • 响应队列
  • 定时任务

     

2.通信协议

  • RESP(Redis Serialization Protocol)
  • 客户端->服务端
  • 服务端->客户端

     

3.持久化

  • 快照原理
  • fork(多进程)
  • AOF原理
  • AOF重写
  • fsync
  • 运维
  • Redis4.0混合持久化

     

4.管道

  • Redis的消息交互
  • 管道压力测试
  • 深入理解管道本质

     

5.事务

  • Redis事务的基本使用
  • 原子性
  • discard(丢弃)
  • 优化
  • Watch

     

6.PubSub

  • 消息多播
  • PubSub
  • 模式订阅
  • 消息结构
  • PubSub缺点

     

7.小对象压缩

  • 32bit vs 64bit
  • 小对象压缩存储(ziplist)
  • 内存回收机制
  • 内存分配算法

     

8.主从同步

  • CAP原理
  • 最终一致
  • 主从同步
  • 增量同步
  • 快照同步
  • 增加从节点
  • 无盘复制
  • Wait指令

     

PART4:Redis集群
1.Sentinel

  • 消息丢失
  • Sentinel基本使用

     

2.Codis

  • Codis分片原理
  • 不同的Codis实例之间槽位关系如何同步?
  • 扩容
  • 自动均衡
  • Codis的代价
  • Codis的优点
  • MGET指令的操作过程
  • 架构变迁
  • Codis的尴尬
  • Codis的后台管理

     

3.Cluster

  • 槽位定位算法
  • 跳转
  • 迁移
  • 容错
  • 网络抖动
  • 可能下线(PFAIL-Possibly Fail)与确定下线(Fail)
  • Cluster基本使用
  • 槽位迁移感知
  • 集群变更感知

     

PART5:Redis拓展
1.Stream

  • 消息ID
  • 消息内容
  • 增删改查
  • 独立消费
  • 创建消费组
  • 消费
  • Stream消息太多怎么办?
  • 消息如果忘记ACK会怎样?
  • PEL如何避免消息丢失?
  • Stream的高可用
  • 分区Partition

     

http://2.Info指令

  • Redis每秒执行多少次指令?
  • Redis连接了多少客户端?
  • Redisn内存占用多大?
  • 复制积压缓存区多大?

     

3.再谈分布式锁

  • Redlock算法
  • Redlock使用场景

     

4.过期策略

  • 过期的key集合
  • 定时扫描策略
  • 从库的过期策略

     

5.LRU

  • LRU算法
  • 近似LRU算法

     

6.懒惰删除

  • Redis为什么要懒惰删除(lazy free)?
  • flush
  • 异步队列
  • AOF Sync也很慢
  • 更多异步删除点

     

7.优雅地使用Jedis

  • 重试

     

8.保护Redis

  • 指令安全
  • 端口安全
  • Lua脚本安全
  • SSL代理

     

9.Redis安全通信

  • spiped原理
  • spiped使用入门

     

PART6:源码
1.探索字符串内部结构

  • embstr vs raw
  • 扩容策略

     

2.探索字典内部

  • dict 内部结构
  • 渐进式rehash
  • 查找过程
  • hash 函数
  • hash攻击
  • 扩容条件
  • 缩容条件
  • set的结构

     

3.探索压缩列表内部

  • 增加元素
  • 级联更新
  • IntSet 小整数集合

     

4.探索快速列表内部

  • 每个ziplist存多少元素?
  • 压缩深度

     

5.探索跳跃列表内部结构

  • 基本结构
  • 查找过程
  • 随机层数
  • 插入过程
  • 删除过程
  • 更新过程
  • 如果score值都一样呢?
  • 元素排名是怎么算出来的?

     

6.探索紧凑列表内部

  • 级联更新
  • 取代ziplist

7.探索基数树内部

  • 应用
  • 结构
  • 增删节点

     

总结
最后,我想说的是,学习并非难事,而贵在坚持,尤其是在我们参与工作之后,要继续坚持学习就更不容易了。但对于程序员来说,学习是立业之根本,如若放弃学习,被市场淘汰是迟早的事情。所以,学习更多新的知识对于自己来说才是一种更大的投资。

软考系统架构设计师论文涉及知识点之Redis(16) 阅读详情

相关推荐

mysql 计算不同胜率的活跃玩家的次日,3日,7日留存率

它根据每天的日期(logymd)和最高段位(max_rank)、胜率段落(win_rate_segment)进行分组,并计算总玩家人数(total_players)、第二天的留存人数(next_day_players)、第三天的留存人数(day3_players)和第七天的留存人数(day7_players)。注意:不是新手留存,是段位活跃玩家留存;最终的结果则是将留存数据进行展示,按照日期(date)、最高段位(rank_level)、胜率段落(win_rate_segment)进行排序。

weixin_42698221的博客 1836

Spring 全家桶高级笔记+15套面试题,跪着啃完了。。。。

疫情当下、裁员浪潮,焦虑和不安充斥这个金三银四。这个时候外部的各种变化愈发证明一个重要的一点:不断提升个人价值的重要性。不是薪资层面的数字简单累积,而是一个人在职场里、在专业领域、在技术上的层层突破和能力塑造,从而建立自己的个人价值。即使面对裁员,也依旧具备不可替代的竞争力;面临危机,也可能遇到新的机遇和更好的选择。大的变化也可能有大的机会,任何时候都不要放弃学习和进阶。...

程序猿DD 651

hCaptcha Enterprise绕过方案对比:四种Capsolver任务类型怎么选?

本文深入评测了hCaptcha Enterprise的四种Capsolver任务类型(HCaptchaEnterpriseTask、HCaptchaEnterpriseTaskProxyLess、HCaptchaTurboTask和HCaptchaTurboTaskProxyLess),分析其技术架构、性能表现及适用场景。通过基准测试和成本模型比较,帮助技术团队选择最优解决方案,提升自动化流程的验证通过率与成本效益。

rrr55的博客 322

阿里顶配版,Spring全家桶高级笔记+300道硬核面试题,跪着啃完了

都说程序员工资高、待遇好, 2024金三银四马上要到了,你的小目标是 30K、40K,还是 16薪的 20K?作为一名 Java 开发工程师,当能力可以满足公司业务需求时,拿到超预期的 Offer 并不算难。然而,提升 Java 核心能力最快、最有效,短期内升职加薪的方法,到底是什么?首先,你需要跳出日常工作,接触更有深度、更前沿的顶级项目。一个简单的逻辑:大厂之所以能够给到高于行业水准的薪资,正是因为即使是普通开发人员,也要应对很多复杂的场景。

知识分享官 1115

基于ENVI5.6与SARscape的哨兵一号时序InSAR实战:从数据准备到PS/SBAS结果解译

本文详细介绍了基于ENVI5.6与SARscape软件,利用哨兵一号(Sentinel-1)卫星数据,进行PS-InSAR与SBAS-InSAR时序分析,以监测地表形变的完整实战流程。内容涵盖从数据下载、软件配置、预处理、核心处理步骤到结果解译与质量评估,重点解析了PS与SBAS方法的关键参数设置、常见问题及解决方案,旨在帮助用户掌握从数据准备到成果分析的完整技术链条。

oo7890的博客 634

极空间NAS零基础部署Wiki.js:Docker+PostgreSQL全流程避坑指南

本文提供了一份在极空间NAS上从零部署Wiki.js私有知识库的详细指南。通过Docker容器化技术,结合PostgreSQL数据库,手把手讲解环境准备、核心组件配置、性能优化及安全加固等全流程,并特别针对极空间平台特性提供了避坑要点,帮助用户打造安全、高效、自主可控的知识管理系统。

3a9bq4r8t2y的博客 486

【运维转行真实感悟】七年运维老员工果断更换赛道,细数运维行业内卷困境,才懂苦海无边

这份资料专门为零基础转行设计,19 大核心模块从 Linux系统、Python 基础、HTTP协议等地基知识到 Web 渗透、代码审计、CTF 实战层层递进,攻防结合的讲解方式让新手轻松上手,真实实战案例 + 落地脚本直接对标企业岗位需求,帮你快速搭建转行核心技能体系!新公司还有个十年老油条“安全专家”,连Nmap扫内网都能触发告警,要不是靠着抄优快云的脚本,这种废物早被开除八百年。那些开保时捷的销售总吹“百分百防护”,真被黑进内网了,还得跪着求老子修。,玩运维的傻逼总吹“亿级并发”,真出事了就会重启。

程序员若风的博客 246

别再手动下单了!用Python+EasyTrader+同花顺,5分钟搞定你的第一个自动化交易机器人

本文详细介绍了如何使用Python和EasyTrader结合同花顺客户端快速构建自动化交易机器人。从环境配置到实战脚本编写,涵盖自动打新、条件单、跟单策略等核心功能,并分享性能优化与风险控制技巧,帮助投资者高效实现自动化交易。

weixin_30381317的博客 398

干了 7 年运维果断转行!细数多年辛酸经历,过来人聊聊真实心路

老子运维干了七年,屁都不敢多放。说出来怕人笑话——前三年在破IDC当服务器保姆,重启+换硬盘混日子;两年给电商公司舔AWS,S3崩了就背锅;最近两年搞K8s,连个屁的零日漏洞都没见过。

wangluo12138的博客 226

jetson agx orin开箱及接口介绍

jetson agx orin开箱及接口介绍

qq_58728069的博客 1万+

11-16 Fluent结果查看及后处理功能(做动画、监控点)

监控点、面及动画操作

zheaa的博客 1万+

英国国家算力基建落地实录:AI如何成为政务水电煤

算力基础设施正从技术概念演变为数字时代的公共品,其核心在于提供稳定、可计量、可审计的AI服务能力。不同于算法竞赛或模型堆砌,现代政务AI的关键瓶颈是算力供给的碎片化与合规调度难题。通过构建模块化、按需付费的国家级AI算力平台,结合私有化部署的大模型能力与严格的数据主权设计,政府得以将高精度信息抽取、实时风险识别、多源法规推理等能力下沉至税务、移民等高频民生场景。这种‘能力借用+主权锁定’模式,既保障了服务响应速度与准确率,又满足GDPR与本地数据治理要求,为全球公共部门AI规模化落地提供了可复用的工程范式。

weixin_30216561的博客 436

华为ONU远程登录管理配置

华为P602E、EG8040CONU、EG8240H5、W626E等ONU、ONT默认无法配置管理IP,无法远程telnet登录管理。校园网项目中因故障诊断需要远程登录ONU可以通过OLT的远程WEB代理功能链接登录,具体配置如下:

symstandsun的博客 6109

Flink 学习日志 03:自定义一个SourceFunction,完成对Redis中数据的读取

本文介绍了在Flink中自定义SourceFunction读取Redis数据的完整流程:通过Jedis客户端连接WSL2中的Redis服务,编写RedisSource实现循环读取所有Key-value并逐条输出,结合Thread.sleep()实现每秒一条的流式效果。关键步骤包括环境准备、添加Jedis依赖、配置IDEA运行时加载provided依赖,并注意生产环境中应避免使用阻塞的keys *,改用scan命令。最终实现动态读取、实时打印,验证了Flink与Redis的数据集成能力。

木木的学习笔记 421

复分析 阿尔福斯(Ahlfors) 第三版答案 英文

答案分为十章,有部分习题没有答案,全英文复分析阿尔福斯(Ahlfors) 第三版答案

WINCC7.3破解文件

WINCC7.3硬件够破解文件,有需要的下载!WINCC7.3硬件够破解文件,有需要的下载!

Docker多阶段构建实现基于Alpine的Redis的编译安装

【代码】Docker多阶段构建实现基于Alpine的Redis的编译安装。

一直在努力学习的菜鸟 323

jre9下载 jdk9

(Java SE Runtime Environment 9.0) 9.0u175 官方最新版 【x86|x64】

Spring Boot 工程通用能力建设:声明式事务定制与 Redis 缓存实践

本文探讨Spring Boot中声明式事务的进阶实践,通过解耦“切点”与“事务属性”,实现灵活控制。核心包括:基于方法名的只读规则(如get*、find*自动设为只读),组合事务属性源确保@Transactional注解优先于命名规则,以及自定义切点实现事务统一织入。该方案提升代码可维护性,避免误写,同时支持特殊场景覆盖,构建更健壮的事务治理体系。

BADAO_LIUMANG_QIZHI的博客 259

大中型超市收银系统(可直接运行)

光步前台收银系统系统功能:商品销售、商品退货、挂单、收银员权限、会员销售、单品取消、整单取消、商品查询、脱机销售、脱机数据上传,基本资料下载,开钱箱、小票打印、收款结算,支持多币种付款方式(现金、储值卡、礼券、微信等),支持多种促销。运行环境:.net 4.0登陆信息用户名:1001 密码:123456内置商品信息,商品编码可输入00001000 - 00010000,测试效果相关功能键F5 结算 F9挂单 F11商品查询 F8退货 Insert单品取消 Del整单取消 F12开钱箱F2 会员 Ctrl+Z退出系统 Home 锁屏 相关源码待公开

Redis 数据类型全解 - ZSet:两个编码,七种玩法(五)

Redis ZSet 是唯一支持按可变分值有序且成员可快速定位的数据结构,适用于排行榜、延迟队列、滑动窗口限流等场景。其核心价值在于用 score 表达业务语义,但使用不当易引发性能问题:轮询导致 CPU 飙升、全量查询拖垮实例、非原子操作致超发。关键陷阱包括 ZRANGE 0 -1 误用为分值范围、GT/LT 条件逻辑误解、双精度精度上限导致分值冲突。正确使用需掌握原子写入(如 ZADD GT)、避免轮询、合理控制范围,并注意编码类型对复杂度的影响。

IT规划师 522

RabbitMQ 消费端幂等:唯一索引、条件更新、Redis 去重三种方案的真实代价

MQ 只承诺至少投递一次,重复消息只能消费端自己吃掉。这篇对比唯一索引、条件更新、Redis 短路三种去重方案在 AI 任务场景下的实际代价,附三个踩过的坑。

zhangpan 206

redis

AOF 文件体积更大,恢复慢,因为恢复的时候要逐条重放命令。AOF 还有重写机制,用来消除冗余,比如同一个 key 连续 set a、set b、set c、set d,重写之后就只保留一条 set key d,精简文件。消息会被分发到每一个实例的队列,所有实例监听自己的队列,收到消息之后,各自删除本机 Caffeine 里面对应的本地缓存,实现一处修改、全部实例本地缓存失效。HyperLogLog 不存原始数据,基于概率算法估算独立数量,内存极小,支持海量 UV 统计,缺点是结果有微小误差,拿不到明细。

2401_84390420的博客 168

Redis Lua 原子限流:Lua 脚本、竞态条件与并发控制

Lua是轻量级可嵌入脚本语言,Redis内置Lua5.1解释器,支持通过EVAL或SCRIPTLOAD执行脚本,实现多命令原子操作。利用redis.call()调用Redis命令,结合KEYS和ARGV传参,可将读取、判断、更新等操作封装为原子逻辑,有效避免限流中的竞态条件。固定窗口限流通过Lua脚本实现计数与过期控制,保证操作连续性。但脚本不可回滚,需避免复杂逻辑;执行时间过长会阻塞Redis,且需满足Cluster哈希槽约束。实际应用中还需考虑故障降级策略。

Joy T的博客 130

如何在本地 Docker 容器中运行 Redis,并使用 Redis Insight 和 Redis CLI 进行管理

本文教程介绍了如何使用Docker本地运行Redis服务器与RedisInsight,实现数据的可视化管理。通过RedisInsight和RedisCLI,学习了对哈希、字符串、列表、集合、有序集、流及JSON等数据类型的增删改查(CRUD)操作,涵盖HSET、GET、SADD、XADD等核心命令,帮助开发者高效掌握Redis基本用法。

csdn_aspnet的专栏,请点击博客主页右上角三个点中的私信联系 276

Redis 从 0 到 1(二十五):连接池又打满了——PoolSize 公式、泄漏排查与 PoolStats

流量一涨就 connection pool timeout,加 PoolSize 治标不治本——可能是连接泄漏。本文给出 PoolSize 计算公式(QPS×RT),用 PoolStats 的 4 个指标判断池太小还是没归还,并演示典型泄漏代码与修复。

2501_92769340的博客 587

Redis 从 0 到 1(二十七):JSON 体积是 Protobuf 的 3.7 倍?3 种序列化的 Go 基准测试

缓存对象直接用 json.Marshal,1 亿条 key 多花 20G 内存和 3 倍带宽。本文对 JSON / MessagePack / Protobuf 做 Go 基准测试(体积、编解码耗时、CPU),给出不同场景的选型表和统一序列化封装。

2501_92769340的博客 184

RedisLockRegistry redis分布式锁(加锁/续期)使用

如果后续锁竞争更重,或者需要更完善的 Watchdog、公平锁、Pub/Sub 唤醒,可以逐步演进到 Redisson。所以它不是检测“业务方法有没有返回”,而是检测。同一个 lockKey,多次。,key 就是你传入的锁名。对象,不会重复 new。

weixin_46136610的博客 204

Redis 键管理命令详解(C++ 版):EXISTS/DEL/KEYS/TTL/TYPE

这是《Redis C++ 实战笔记》系列的第 02 篇。上一篇立了调用约定,从这一篇开始进入正题。先讲"键管理"——它不属于任何一种数据类型,但它操作的是键本身,后面每一种类型都会用到。

wbs_scy的博客 181
上一篇: 基础夯实,字节内部总结240道算法LeetCode刷题笔记,直呼太全
下一篇: 最新出炉!2022金九银十Java面试复盘,22w字
Java技术那些事儿
博客等级 码龄5年 2306粉丝 2584原创
评论
成就一亿技术人!
拼手气红包6.0元
还能输入1000个字符
 
 条评论被折叠 查看
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付:10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值