Redis内存淘汰策略

Redis内存淘汰策略

内存淘汰:就是当Redis内存使用达到设置的上限时,主动挑选部分key删除以释放更多内存的流程。Redis会在处理客户端命令的方法processCommand()中尝试做内存淘汰:

在这里插入图片描述

淘汰策略

Redis支持8种不同策略来选择要删除的key:

  • noeviction: 不淘汰任何key,但是内存满时不允许写入新数据,默认就是这种策略。
  • volatile-ttl: 对设置了TTL的key,比较key的剩余TTL值,TTL越小越先被淘汰
  • allkeys-random:对全体key ,随机进行淘汰。也就是直接从db->dict中随机挑选
  • volatile-random:对设置了TTL的key ,随机进行淘汰。也就是从db->expires中随机挑选。
  • allkeys-lru: 对全体key,基于LRU算法进行淘汰
  • volatile-lru: 对设置了TTL的key,基于LRU算法进行淘汰
  • allkeys-lfu: 对全体key,基于LFU算法进行淘汰
  • volatile-lfu: 对设置了TTL的key,基于LFI算法进行淘汰
    比较容易混淆的有两个:
    • LRU(Least Recently Used),最少最近使用。用当前时间减去最后一次访问时间,这个值越大则淘汰优先级越高。
    • LFU(Least Frequently Used),最少频率使用。会统计每个key的访问频率,值越小淘汰优先级越高。

Redis的数据都会被封装为RedisObject结构:

在这里插入图片描述

LFU的访问次数之所以叫做逻辑访问次数,是因为并不是每次key被访问都计数,而是通过运算:

  • 生成0~1之间的随机数R
  • 计算 (旧次数 * lfu_log_factor + 1),记录为P
  • 如果 R < P ,则计数器 + 1,且最大不超过255
  • 访问次数会随时间衰减,距离上一次访问时间每隔 lfu_decay_time 分钟,计数器 -1

最后用一副图来描述当前的这个流程吧

在这里插入图片描述

### Redis 内存淘汰策略机制及实现 Redis内存管理机制是其性能优化的核心之一,当 Redis内存使用量达到配置的限制时(由 `maxmemory` 参数控制),Redis 会根据指定的内存淘汰策略来释放空间,以保证服务的可用性[^1]。以下是 Redis 内存淘汰策略的工作原理和实现细节。 #### 一、内存淘汰策略概述 Redis 提供了多种内存淘汰策略,这些策略通过 `maxmemory-policy` 配置项进行设置。根据键的范围和淘汰算法的不同,可以将这些策略分为三类[^5]: - **noeviction**:不淘汰任何键,当内存不足时直接返回错误。 - **allkeys**:在所有键中选择淘汰目标。 - **volatile**:仅在设置了过期时间的键中选择淘汰目标。 具体淘汰算法包括以下四种: 1. **随机淘汰(Random)**:随机选择键进行淘汰。 2. **最少使用(LRU, Least Recently Used)**:淘汰最久未使用的键。 3. **最少访问频率(LFU, Least Frequently Used)**:淘汰访问频率最低的键。 4. **基于大小(TTL, Time To Live)**:优先淘汰剩余存活时间较短的键。 #### 二、内存淘汰策略的实现细节 1. **随机淘汰** - 在 `allkeys-random` 和 `volatile-random` 策略中,Redis 使用伪随机数生成器从候选键集合中随机选择键进行淘汰[^5]。 - 这种方法简单高效,但可能会导致重要数据被意外删除。 2. **LRU 淘汰** - LRU 淘汰策略(如 `allkeys-lru` 和 `volatile-lru`)依赖于 Redis 的内部 LRU 数据结构,该结构记录每个键的最后访问时间[^1]。 - 当需要淘汰键时,Redis 会扫描一定数量的候选键,并选择最后访问时间最早的键进行淘汰。 - Redis 并不维护一个完整的全局 LRU 列表,而是通过采样技术(例如每轮检查 5 个随机键)来近似实现 LRU 淘汰[^2]。 3. **LFU 淘汰** - LFU 淘汰策略(如 `allkeys-lfu` 和 `volatile-lfu`)基于键的访问频率进行淘汰[^3]。 - Redis 使用一个计数器记录每个键的访问频率,淘汰时选择访问频率最低的键。 - 访问频率的计算结合了时间衰减因子,确保长期未访问的键也能被淘汰。 4. **TTL 淘汰** - TTL 淘汰策略(如 `volatile-ttl`)优先淘汰剩余存活时间较短的键[^4]。 - 这种策略特别适用于缓存场景,能够有效减少内存占用。 #### 三、内存淘汰策略的监控与优化 为了确保内存淘汰策略的有效性,建议通过监控工具(如 RedisInsight 或 Prometheus)实时跟踪内存使用情况和淘汰指标[^2]。常见的优化实践包括: - 根据业务需求选择合适的淘汰策略。 - 定期分析淘汰日志,识别高频淘汰的键并优化存储逻辑。 - 调整 `maxmemory` 配置以平衡内存使用和性能需求。 ```python # 示例:设置 maxmemory 和淘汰策略 redis-cli config set maxmemory 1gb redis-cli config set maxmemory-policy allkeys-lru ``` #### 四、内存回收机制 除了内存淘汰策略外,Redis 还通过定期删除和惰性删除两种方式来清除过期的键[^3]: - **惰性删除**:仅在访问某个键时检查其是否已过期,若已过期则立即删除。 - **定期删除**:后台线程定期扫描一定比例的过期键并删除。 这两种机制共同作用,确保过期键不会长时间占用内存。 ---
评论
成就一亿技术人!
拼手气红包6.0元
还能输入1000个字符
 
红包 添加红包
表情包 插入表情
 条评论被折叠 查看
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值