kernel做了哪些尝试去避免内存碎片化

最新推荐文章于 2023-11-10 13:15:49 发布

鲁班king666

最新推荐文章于 2023-11-10 13:15:49 发布

阅读量206

点赞数

本文链接：https://blog.youkuaiyun.com/qq_33894122/article/details/108040588

版权

本文探讨了Linux系统中内存碎片化的问题，介绍了Linux通过buddy伙伴系统、MOVABLE和RECLAIMABLE属性以及内存迁移技术来减少内存碎片化的策略。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

内存碎片化

linux内存管理以page为单位进行管理，在系统长时间运行之后，造成有大量离散不连续的页面存在，这就是内存碎片化。

linux为减少内存碎片化做的努力

1. 使用了 buddy 伙伴系统来管理物理内存
2. 给每个页面定义了 MOVALBE属性，在内存碎片化压力比较大的时候可以 做内存规整
   MOVABLE 内存页面可以移动，
   RECLAIMABLE 内存页面可以直接进行回收
3.

内存迁移一开始是为了 NUMA 系统中 task 可以完全迁移到另一个 NUMA 节点中去，后来
也被大量的应用于内存热插拔和内存规整上
可以参考：
内存迁移
 内存规整
 KSM

确定要放弃本次机会？

福利倒计时

: :

立减 ¥

普通VIP年卡可用

立即使用

鲁班king666

关注关注

0
点赞
踩
0

收藏

觉得还不错? 一键收藏
0
评论
分享

复制链接

分享到 QQ

分享到新浪微博

扫一扫
举报

举报

Linux内存管理（22）：buddy 分配器前篇

私房菜

08-06

986

在上一文buddy 系统中，简单介绍了 buddy 系统的初始化过程以及其原理。我们知道 buddy 系统是操作系统中常用的一种动态存储管理方法，在用户提出申请时，分配一个大小合适的内存块给用户，并在用户释放内存块时回收。在buddy 系统中，内存块（page block）的大小是2 的 order 次幂个pages。Linux 内核中 order 的最大值用 MAX_ORDER 来表示，通常是11，也就是最大的物理内存块可以达到pages（4MB）。zone 中的 free_area 数组分别管理。

Android内存优化指南：从数据结构到5R法则的全面策略

最新发布

帅次的博客

02-26

2020

Android内存优化涉及多个方面，从选择合适的数据结构如ArrayMap和SparseArray以减少内存占用，到避免使用内存开销大的枚举类型。谨慎使用多进程和large heap选项，同时充分利用NDK进行内存管理。图片优化是关键，通过采样、缓存和格式转换等方式减少内存占用。此外，遵循5R法则——释放、回收、减少、重用和检查，确保资源得到有效管理。这些策略共同构成了一套全面的Android内存优化方案，有助于提升应用性能和用户体验。

参与评论您还未登录，请先登录后发表或查看评论

内核内存碎片管理

Yonx

09-16

389

大页面和透明大页面内存是由块管理，即众所周知的页面。一个页面有 4096 字节。1MB 内存等于 256 个页面。1GB 内存等于 256000 个页面等等。CPU 有内嵌的内存管理单元，这些单元中包含这些页面列表，每个页面都使用页表条目参考。让系统管理大量内存有两种方法：增加硬件内存管理单元中页表数增大页面大小第一个方法很昂贵，因为现代处理器中的硬件内存管理单元只支持数百或者书签页表条目。另外适用于管理数千页面（MB 内存）硬件和内存管理算法可能无法很好管理数百万（甚至数十亿）页面。这会

linux内存碎片清除,linux kernel内存碎片防治技术

weixin_42466857的博客

04-30

440

Linux kernel组织管理物理内存的方式是buddy system(伙伴系统)，而物理内存碎片正式buddy system的弱点之一，为了预防以及解决碎片问题，kernel采取了一些实用技术，这里将对这些技术进行总结归纳。1 低内存时整合碎片从buddy申请内存页，如果找不到合适的页，则会进行两步调整内存的工作，compact和reclaim。前者是为了整合碎片，以得到更大的连续内存；后者是...

Linux kernel内存反碎片技术

weixin_52626887的博客

09-08

182

Linux内存管理

【干货 · 故障排查】Kubernetes-pod常见异常原因排查处理梳理

SRE成长记

11-10

3170

【干货 · 故障排查】Kubernetes-pod常见异常原因排查处理梳理

避免物理内存碎片化

热门推荐

kickxxx的专栏

07-01

1万+

以前的项目碰到了buddy内存分配失败的情况，最近面试的两家公司也提到了这个问题。物理内存碎片化，是指系统空闲物理内存被使用过的物理内存分割开，导致buddy系统无法满足page分配申请，尤其是申请的连续空间较大的情况下。一般情况下，出错信息如下： [ 3308.564000] lowmem_reserve[]: 0 0 0 [ 3308.564000] Normal: 7

AI算力碎片化：矩阵乘法的启示

OneFlow深度学习框架

04-21

6110

尽管AI的发展取得了巨大进步，但编译器LLVM之父Chris Lattner认为，AI技术应用并不深入，远远没有发挥出已有机器学习研究的所有潜力。而AI系统和工具的单一化和碎片化正是造成这一问题的根源。为了让AI发挥其真正的潜力，计算碎片化是需要解决的重点问题之一，目标是让AI软件开发人员能够无缝地充分利用现有硬件和下一代创新硬件。但解决这一问题并不容易，硬件、模型和数据的多样性使得当前市场上的现...

linux如何解决内存碎片问题的

02-21

【CUDA内存池技术】：内存碎片不再烦恼，效率翻倍

首先概述了CUDA内存池技术，并分析了CUDA内存管理的类别和分配机制，以及内存碎片问题。接着，本文深入探讨了内存池的理论基础，包括其概念、实现机制和适用场景。在实践层面，文章讨论了内存池的创建、性能测试、...

linux kernel内存碎片防治技术

zdy0_2004的专栏

11-05

1123

linux kernel内存碎片防治技术 http://www.wowotech.net/linux_kenrel/memory-fragment.html Linux kernel组织管理物理内存的方式是buddy system（伙伴系统），而物理内存碎片正式buddy system的弱点之一，为了预防以及解决碎片问题，kernel采取了一些实用技术，这里将对这些技术进行总结归纳。 1 低

避免物理内存碎片化 - 内存紧缩

kickxxx的专栏

07-03

5993

原文地址 http://lwn.net/Articles/368869/ 长期存在的内存碎片问题，已经有多篇文章提及了。简单的说：当系统运行一段时间后，空闲页面趋向于散落在不连续的空间，很难再有足够长的连续物理内存页面分配。内核开发者已经下了很多工夫，减少大块连续物理内存的分配，因此大部分内核功能并不会受到页面碎片化的影响。但是仍然存在对大块连续物理内存的需要，在内存碎片化系统上的内存分

malloc原理和内存碎片

ZY-JIMMY

11-07

2415

内存分配的原理从操作系统角度来看，进程分配内存有两种方式，分别由两个系统调用完成：brk和mmap（不考虑共享内存）。 1、brk是将数据段(.data)的最高地址指针_edata往高地址推； 2、mmap是在进程的虚拟地址空间中（堆和栈中间，称为文件映射区域的地方）找一块空闲的虚拟内存。这两种方式分配的都是虚拟内存，没有分配物理内存。在第一次访问已分配的虚拟地址空间的时候，...

linux内存碎片管理

liuxd3000的专栏

04-15

9664

查看内存碎片： # cat /proc/buddyinfo

低内存手机kernel的几个性能优化点

pillarbuaa的专栏

10-30

963

低内存手机kernel的几个性能优化点 1.快速释放内存 boost free anon pages of sigkill process 1.1修改@kernel/msm-4.9/arch/arm/mm/fault.c #include "fault.h"#include <linux/boost_sigkill_free.h> #ifdef CONFIG_MMU #ifdef CONFIG_KPROBES static int __kprobes __do_page_fa...

k8s 最佳实践：处理内存碎片化

Y先森0.0

05-16

1314

k8s 最佳实践：处理内存碎片化 内存碎片化造成的危害节点的内存碎片化严重，导致docker运行容器时，无法分到大的内存块，导致start docker失败。最终导致服务更新时，状态一直都是启动中在长时间运行的Linux操作系统中，系统日志有时会出现无法分配高阶内存的报错信息： Aug 4 22:58:15 server1 kernel: : [69229257.683658] xenwa...

内存碎片

wangjunhe的专栏

01-06

3291

内存碎片的产生：内存分配有静态分配和动态分配两种静态分配在程序编译链接时分配的大小和使用寿命就已经确定，而应用上要求操作系统可以提供给进程运行时申请和释放任意大小内存的功能，这就是内存的动态分配。因此动态分配将不可避免会产生内存碎片的问题，那么什么是内存碎片？内存碎片即“碎片的内存”描述一个系统中所有不可用的空闲内存，这些碎片之所以不能被使

kernel做了哪些尝试去 避免内存碎片化

内存碎片化

linux为减少内存碎片化做的努力

kernel做了哪些尝试去避免内存碎片化