关于memcached out of memory这个错误

本文介绍了针对Memcached内存分配不均导致的out of memory问题,提出的一种定长分配内存的解决方案。通过修改源代码,包括调整HASHPOWER、定义VDIR_SIZE、修改slabs_clsid、slabs_init等函数,实现内存按需分配,避免内存浪费。此外,详细阐述了数据存储空间和POWER_BLOCK的计算方法,以确保内存高效利用。
 


提到的问题,如果我没记错的话,我们在07年初开始部署Memcache的时候确实也有。我斗胆放出当时的一些修改记录。发现这个问题的是我的BOSS, 当时还没开始部署Memcache,BOSS在阅读源代码的时候发现了其中的问题,就如这篇日志所描述的,内存分配问题。

当时和我一起参与项目2位C高手对Memcache的内存分配代码做了一些修改,将MC的内存不均,改为定长分配内存。不过每次使用MC的时候都要根据所 设置数据的大小进行合理的修改,并重新MAKE安装以便使MC的内存可以充分使用完所设置的,不会像这篇日志所说的会有使不完但内存又不足的情况。局限性 就是不同的项目不能混用MC,否则内存容量就乱了。参与修改的是小马哥,和奶瓶,我是项目负责人,在完成项目后将修改做了详尽记录以便在部署MC的时候不 会出现遗漏。

在我们部门后来做的MDB上已经没有这个问题了,因为用的是BDB的内存管理。这些老资料基本已经无用了,因为我们都在使用MDB,纯的MC业务应该是没有了。

2.Memcached定长版修改细节

1.修改assoc.c

A.修改HASHPOWER常量为24,使HASH数组最大长度达到FFFFFF

#define HASHPOWER 24

2.修改slabs.c

A.增加单条记录长度常量VDIR_SIZE定义,该值需要根据不同项目的占用存储空间进行修改

#define VDIR_SIZE 90

B.修改slabs_clsid函数,返回虚拟目录字节单条记录长度常量

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值