Redis的内存碎片

本文通过YCSB测试Redis的内存使用,发现随着key-value负载变化,内存碎片问题显著,内存利用率降低。实验显示,即使在定长负载下,Redis分配的内存远超实际数据量,且在高update负载下,内存需求加倍,可能与Redis的rdb机制有关。在非极端负载下,如Facebook公布的负载,jemalloc内存管理表现良好,未出现严重碎片问题。

摘要生成于 C知道 ,由 DeepSeek-R1 满血版支持, 前往体验 >

Redis默认使用jemalloc分配内存,根据fast'14的最佳论文的说法,当遇到变长key-value负载时,会出现碎片问题:内存利用率低,实际分配的内存比所需要的内存多。因此我用YCSB对Redis的内存进行了测试。

  • 实验的第1阶段:向Redis插入100万条记录,key为20字节,value为100字节,皆为定长,理论上的有效数据大约是120MB。
  • 阶段2:产生90万个update请求,请求为均匀随机分布(每个key被选中的概率相等),key值不变,但value变为130字节。一次update相当于删除原来的100字节,再插入一个130字节。
  • 阶段3:产生90万个update请求,value变为170字节。
  • 阶段4:产生90万个update请求,value变为210字节。
  • 接着12个阶段,每次都是90万个update请求,value长度渐增。
  • 最后一个阶段不产生任何请求,重启redis。

然后每一阶段结束后,都使用info命令查看redis的内存

评论 1
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值