本文通过YCSB测试Redis的内存使用，发现随着key-value负载变化，内存碎片问题显著，内存利用率降低。实验显示，即使在定长负载下，Redis分配的内存远超实际数据量，且在高update负载下，内存需求加倍，可能与Redis的rdb机制有关。在非极端负载下，如Facebook公布的负载，jemalloc内存管理表现良好，未出现严重碎片问题。
Redis默认使用jemalloc分配内存，根据fast'14的最佳论文的说法，当遇到变长key-value负载时，会出现碎片问题：内存利用率低，实际分配的内存比所需要的内存多。因此我用YCSB对Redis的内存进行了测试。
- 实验的第1阶段：向Redis插入100万条记录，key为20字节，value为100字节，皆为定长，理论上的有效数据大约是120MB。
- 阶段2：产生90万个update请求，请求为均匀随机分布（每个key被选中的概率相等），key值不变，但value变为130字节。一次update相当于删除原来的100字节，再插入一个130字节。
- 阶段3：产生90万个update请求，value变为170字节。
- 阶段4：产生90万个update请求，value变为210字节。
- 接着12个阶段，每次都是90万个update请求，value长度渐增。
- 最后一个阶段不产生任何请求，重启redis。
然后每一阶段结束后，都使用info命令查看redis的内存
最低0.47元/天 解锁文章
扫一扫
被折叠的 条评论
为什么被折叠?
到【灌水乐园】发言
