避免Linux内存浪费:Facebook开发新的THP收缩机制

Facebook的工程师开发了THPShrinker,一种用于提高Linux透明页效率的机制,通过移除未充分利用的页面避免内存浪费。THPShrinker旨在减少内存消耗,同时保持CPU效率,目标是逐步取代madviseTHP模式,使THP对所有应用默认启用。

摘要生成于 C知道 ,由 DeepSeek-R1 满血版支持, 前往体验 >

Meta/Facebook的工程师宣布了他们在THP Shrinker方面的工作,这是一种让Linux的透明页(THP)工作更有效率的方法,主要原理是通过移除未被充分利用的透明页来避免内存浪费。

THP对于某些工作负载来说,通过减少TLB缓存的未命中状态可以提高效率,但是2MB与4Kb的页面大小如果没有得到有效利用,反而会导致大量的内存浪费。

Facebook的工程师在他们的一个平台上发现,由于THP没有得到充分利用,甚至让每台机器造成了大约2.7GB的内存浪费。

Facebook正在为Linux内核开发的THP收缩机制旨在解决这种浪费,与此同时仍然可以享受THP以提高CPU效率的优势,THP Shrinker将分割利用率最低的大内存页面。

THP Shrinker旨在避免浪费RAM,并尽可能让大内存页面透明并对外开放,使其无条件地启用,从而替代了基于madevise系统调用的选择。

Facebook的工程师们正在努力围绕这个THP Shrinker增加额外的调整,并可能与CPU/IO/内存压力事件挂钩。最终,工程师希望通过THP收缩器可以直接废除Linux的madvise THP模式,并切换到THP为所有应用程序启用。

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值