GNU/Linux - /proc/sys/vm/overcommit_memory

最新推荐文章于 2025-05-14 09:40:08 发布
原创 最新推荐文章于 2025-05-14 09:40:08 发布 · 1.1k 阅读 · 5 ·
CC 4.0 BY-SA版权
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
文章标签：

#linux

/proc/sys/vm/overcommit_memory "是一个 Linux 内核参数，用于控制系统处理内存分配请求的方式。该参数对决定进程请求内存时内核的行为至关重要。让我们来详细了解一下它的含义和影响：
The "/proc/sys/vm/overcommit_memory" is a Linux kernel parameter that controls how the system handles memory allocation requests. This parameter is crucial in determining the kernel's behavior when processes request memory. Let's explore its meaning and implications in detail:
Overview
overcommit_memory 参数决定内核的内存超量分配策略。内存超额分配允许系统为进程分配的虚拟内存超过可用的物理内存（包括交换）。
The overcommit_memory parameter determines the kernel's policy for memory overcommitment. Memory overcommitment allows the system to allocate more virtual memory to processes than the amount of physical memory (including swap) available.
Available Modes
overcommit_memory 有三种可能的值，分别代表不同的超量提交处理模式：
There are three possible values for overcommit_memory, each representing a different overcommit handling mode:
    1. 模式 0（默认）： 启发式超承诺处理
   - 这是默认设置。
   - 内核使用启发式方法决定是否允许或拒绝内存分配请求。
   - 内核通常允许轻微的超量分配，但拒绝明显的地址空间超量分配。
   - 该模式旨在防止疯狂分配，同时减少交换使用。
   - 在此模式下，允许根用户分配稍多的内存。
    1. Mode 0 (Default): Heuristic overcommit handling
   - This is the default setting.
   - The kernel uses a heuristic approach to decide whether to allow or refuse memory allocation requests.
   - It typically allows slight overcommitment but refuses obvious overcommits of address space.
   - This mode aims to prevent wild allocations while reducing swap usage.
   - Root users are allowed to allocate slightly more memory in this mode.
  2. 模式 1：总是超量分配
   - 在这种模式下，无论当前内存使用情况如何，内核总是允许内存分配请求。
   - 这种模式适用于某些科学应用程序，尤其是那些使用稀疏阵列（主要由零页组成）的应用程序。
   - 这种模式可能会有风险，因为它可能会更频繁地导致内存不足（OOM）的情况。
    2. Mode 1: Always overcommit
   - In this mode, the kernel always allows memory allocation requests, regardless of the current memory usage.
   - It's appropriate for some scientific applications, particularly those using sparse arrays that consist mostly of zero pages.
   - This mode can be risky as it may lead to out-of-memory (OOM) situations more frequently.
    3. 模式 2：不过度承诺
   - 这是最保守的模式。
   - 系统提交的总地址空间不允许超过 swap 加上物理 RAM 的可配置百分比（默认为 50%）。
   - 当达到限制时，进程将在内存分配时收到错误信息，而不是在访问页面时被杀死。
   - 该模式适用于需要保证其内存分配在未来可用的应用程序。
    3. Mode 2: Don't overcommit
   - This is the most conservative mode.
   - The total address space commit for the system is not permitted to exceed swap plus a configurable percentage (default 50%) of physical RAM.
   - Processes will receive errors on memory allocation when the limit is reached, rather than being killed while accessing pages.
   - This mode is useful for applications that need to guarantee their memory allocations will be available in the future.
Setting and Viewing the Value
    您可以使用以下命令查看 overcommit_memory 的当前值：
    You can view the current value of overcommit_memory using the following command:
cat /proc/sys/vm/overcommit_memory
    要临时更改数值，可以使用
    To change the value temporarily, you can use:
echo 1 | sudo tee /proc/sys/vm/overcommit_memory
    如需永久更改，请在 /etc/sysctl.conf 中添加以下一行：
    For a permanent change, add the following line to /etc/sysctl.conf:
vm.overcommit_memory=x
其中，“x ”为所需值（0、1 或 2）。
Where 'x' is the desired value (0, 1, or 2).
Related Parameters
  •  vm.overcommit_ratio： 该参数设置模式 2 时允许超量提交的物理 RAM 百分比。
  •  vm.overcommit_kbytes： overcommit_ratio 的替代参数，指定以千字节为单位的超量分配限制。
  • vm.overcommit_ratio: This parameter sets the percentage of physical RAM to allow for overcommitment when in mode 2.
  • vm.overcommit_kbytes: An alternative to overcommit_ratio, specifying the overcommit limit in kilobytes.
在我的Ubuntu里看了下，ratio是50，kbytes是0。
Practical Implications
    1. 模式 0（默认）： 兼顾大多数系统的性能和稳定性。
    2. 模式 1：适用于需要大量虚拟内存但不一定全部使用虚拟内存的应用程序。不过，如果物理内存耗尽，可能会导致系统不稳定。
    3. 模式 2：提供最高级别的内存分配保证，但可能会限制某些应用程序的性能。
    1. Mode 0 (Default): Balances performance and stability for most systems.
    2. Mode 1: Useful for applications requiring large amounts of virtual memory but not necessarily using it all. However, it can lead to system instability if physical memory is exhausted.
    3. Mode 2: Provides the highest level of memory allocation guarantee but may limit performance for some applications.
Choosing the Right Mode
超量提交模式的选择取决于具体的使用情况：
- 对于通用系统，默认模式 0 通常比较合适。
- 科学应用或使用稀疏数据结构的应用可能会从模式 1 中受益。
- 需要严格内存分配保证的系统应考虑使用模式 2。
The choice of overcommit mode depends on your specific use case:
- For general-purpose systems, the default mode 0 is usually suitable.
- Scientific applications or those using sparse data structures might benefit from mode 1.
- Systems requiring strict memory allocation guarantees should consider mode 2.
了解并正确配置 overcommit_memory 参数对于优化系统性能和稳定性至关重要，尤其是在有特定内存要求或限制的环境中。
Understanding and properly configuring the overcommit_memory parameter is crucial for optimizing system performance and stability, especially in environments with specific memory requirements or constraints.
资料来源:
[2] Overcommit Accounting - The Linux Kernel Archives, https://www.kernel.org/doc/Documentation/vm/overcommit-accounting
[3] Linux Overcommit Modes | Baeldung on Linux, https://www.baeldung.com/linux/overcommit-modes
[4] Linux memory overcommit details - Stack Overflow, https://stackoverflow.com/questions/19148296/linux-memory-overcommit-details
overcommit_memory
厚积薄发者，轻舟万重山
09-27 899
目录 overcommit_memory Overcommit Accounting CommitLimit and Committed_AS overcommit_kbytes orovercommit_ratio overcommit_memory:Documentation for /proc/sys/vm/ — The Linux Kernel documentation overcommit_memory这个vm参数用于控制malloc、mmap这些用于在进程虚拟地址空间申请虚拟..
手把手教你学会gdb，适应Linux调试环境
loOK后端
03-31 818
在前文 基于vscode 打造Linux C++编码环境 一期中，讲解了如何基于vscode搭建Linux c++的编码环境，但是还没有讲解如何基于vscode搭建调试环境。本期，主要有两个任务： 讲解常用的gcc编译选项 讲解常用的gdb编译指令 本文更好的阅读体验，可以点击： 手把手教你学会gdb，适应Linux调试环境 更多硬核知识，vx搜一搜: look_code_art，更多硬核等你发现， 也可以添加个人 vx: fibonaccii_ 常用gcc编译选项 在 深入了解C++系列中
overcommit_memory引起的TongWeb内存溢出
最新发布
weixin_59691555的博客
05-14 214
free命令查看操作系统的空闲内存还有8G，JVM最小、最大堆内存都设置2G，启动TongWeb报Out of Memory Error并生成hs文件。如果一台服务器同时运行了多个应用程序，建议多个程序内存设置总和不超过系统内存的70%。），为了最大化的利用内存资源，Linux的内存管理机制允许程序申请超过实际物理内存大小的内存空间的，即过量分配。一台服务器上安装了多个TongWeb实例，后启动的实例有这个问题。多数情况下，程序申请了内存但实际上还未使用（内存中为。计算得出可供程序使用的内存约有。
理解overcommit_memory
weixin_34074740的博客
09-21 156
Redis在启动的时候会报如下WARNING：WARNING overcommit_memory is set to 0! Background save may failunder low memory condition.To fix this issue add 'vm.overcommit_memory = 1'to /etc/sysctl.conf and then...
Linux下安装redis
lankk1的魔法书札
07-22 395
redis依赖gcc，安装redis前首先要确认Linux系统是否已安装gcc。本节是采用redis源码安装。 1.检查Linux系统中是否安装gcc [root@iZaaa63Z ~]# gcc -v Using built-in specs. Target: x86_64-redhat-linux Configured with: ../configure --prefix=/usr -...
Linux系统 mmap 存储映射
tugouxp的专栏
04-23 2034
括号中表示预期行为，括号外部的表示在LINUX系统中的实际行为，比如组合SHARED/EXEC的读行为，对于一个可执行的共享地址来说，没有给与PROT_READ属性，预期当然不可读，但是由于CPU执行上面的代码，必须要进行读操作，而实际的硬件架构和及并没有区分执行读和其它方式的读，所以，实际上对于这样的内存，仍然是可读的。从上图中可以看到，这段匿名区域（可能是MMAP区域，现在的MALLOC都用MMAP实现）地址是向下增长的，像栈一样，就像前面提到的第二种情况，这是在哪里控制的呢？
Linux 实战技巧
05-31 4056
常用命令 adduser # 以创建 Apache Eagle 用户为例 $ adduser eagle $ passwd eagle # ur password for eagle user # 赋予用户可以 sudo 的权限 $ chmod u+w /etc/sudoers $ vim /etc/sudoers # 找到 `root ALL=(ALL) A...
Greenplum6.2.1 安装手记
pingrui123456的博客
07-13 978
1.软硬件说明及必要依赖安装 1.1 软硬件说明 系统版本:centos7.0 硬件：3台虚拟机，2核，16G内存，50G硬盘 实验节点规划一个master, 4个segment,4个mirror,无standby 主机ip host 节点规划 172.28.25.201 mdw master 172.28.25.202 sdw1 seg1,seg2,mirror3,mirror4 172.28.25.203 sdw2 seg3,seg4,
内存分配策略：overcommit_memory
xsxb_yl的博客
11-18 9748
overcommit_memory overcommit_memory 是什么？ overcommit_memory是内存分配策略，内核对内存分配的一种策略。 overcommit_memory 有什么作用？ overcommit_memory取值又三种分别为0， 1， 2 overcommit_memory=0， 表示内核将检查是否有足够的可用内存供应用进程使用；如果有足够 的可用内存，内存申请允许；否则，内存申请失败，并把错误返回给应用进程。 overcommit_memory=1， 表示内核允
Linux kernel内存管理之overcommit相关参数
weixin_45337360的博客
06-30 2383
主要讲述了linux kernel内存管理中虚拟内存分配时会用到的overcommit相关参数，会通过该参数来判断用户进程的虚拟内存分配是否允许。
Memory Overcommit
wll1228的博客
04-14 778
Memory Overcommit 1.什么是OverCommit Memory? Memory Overcommit：操作系统承诺给进程内存大小超过了实际可用的内存。一个保守的操作系统不会允许memory overcommit，有多少就分配多少，再申请就没有了，这其实有些浪费内存，因为进程实际使用到的内存往往比申请的内存要少，比如某个进程malloc()了200MB内存，但实际上只用到了100MB，按照UNIX/Linux的算法，物理内存页的分配发生在使用的瞬间，而不是在申请的瞬间，也就是说未用到的100
/proc/sys/vm/优化
Byane的专栏
11-29 1197
1) /proc/sys/vm/block_dump 该文件表示是否打开Block Debug模式，用于记录所有的读写及Dirty Block写回动作。 缺省设置：0，禁用Block Debug模式 2) /proc/sys/vm/dirty_background_ratio 该文件表示脏数据到达系统整体内存的百分比，此时触发pdflush进程把脏数据写回磁盘。 缺省设置：10
Overcommitting Memory （过度使用内存）
zyqash的博客
02-10 1019
目标 完成本章节学习，学生应该能调节过度使用内存。 调节过度使用 许多应用程序相较于她们将实际使用的内存会请求分配更多的内存，另一些程序会请求内核分配超过系统可用内存的内存大小，解决这个问题的一个方法是调节 vm.overcommit_memory 参数，这个值可以是以下3个值 0：使用启发式算法，如果程序企图申请比可用内存更多的空间，则内核返回拒绝。但是当有大量的小内存申请时，内核依然可能overcommit。 1：不管系统是否有足够的内存，内核总是会分配内存申请 2：从不过...
sysctl 中 vm.overcommit_memory 的含义
weixin_34174422的博客
06-07 2709
overcommit_memory参数说明： 设置内存分配策略（可选，根据服务器的实际情况进行设置） /proc/sys/vm/overcommit_memory 可选值：0、1、2。 0， 表示内核将检查是否有足够的可用内存供应用进程使用；如果有足够的可用内存，内存申请允许；否则，内存申请失败，并把错误返回给应用进程。 1， 表示内核允许分配所有的物理内存，而不管当前的内存...
MongoDB numa系列问题三：overcommit_memory和zone_reclaim_mode
weixin_34320159的博客
05-07 179
内核参数overcommit_memory ： 它是 内存分配策略 可选值：0、1、2。0:表示内核将检查是否有足够的可用内存供应用进程使用；如果有足够的可用内存，内存申请允许；否则，内存申请失败，并把错误返回给应用进程。1:表示内核允许分配所有的物理内存，而不管当前的内存状态如何。2:表示内核允许分配超过所有物理内存和交换空间总和的内存 内核参数zone_reclaim_mode： 可选...
add_swap() { echo lz4 > /sys/block/zram0/comp_algorithm echo 15M > /sys/block/zram0/disksize ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? mkswap /dev/zram0 ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? swapon /dev/zram0 # set min free reserve bytes echo 256 > /proc/sys/vm/min_free_kbytes echo 120 > /proc/sys/vm/dirty_expire_centisecs echo 100 > /proc/sys/vm/swappiness echo 200 > /proc/sys/vm/vfs_cache_pressure ? ? echo 1 > /proc/sys/vm/overcommit_memory } 这是一个sh脚本里的函数，我该怎么调用它
04-11
### 如何在 Shell 脦本中调用 add_swap 函数 在 Shell 脚本中，函数的定义和调用是非常常见的操作。以下是关于如何定义并调用 `add_swap` 函数的具体方法。 #### 定义函数 在 Shell 脚本中，函数可以通过两种方式定义： 1. **使用关键字 `function` 的方式** ```bash function add_swap() { echo "This is the add_swap function" # 可以在此处添加具体逻辑 } ``` 2. **直接命名的方式** ```bash add_swap() { echo "This is the add_swap function" # 添加具体的实现细节 } ``` 上述两种方式均有效[^3]，可以根据个人习惯选择其中一种方式进行定义。 #### 调用函数 一旦函数被定义，就可以通过其名称直接调用来执行相应的代码块。例如： ```bash add_swap ``` 如果该函数需要传入参数，则可以在调用时附加这些参数。例如： ```bash add_swap param1 param2 ``` 在函数内部，可以使用 `$1`, `$2` 等变量来访问传递给它的参数[^1]。 #### 返回值处理 函数可以通过 `return` 语句返回一个整数值作为退出状态码。如果没有显式指定返回值，默认会返回最后一行命令的退出状态码。例如： ```bash add_swap() { echo "Executing add_swap..." return 0 } echo $? # 输出上一命令的退出状态码 ``` 此外，也可以利用标准输出将数据返回给调用者。例如： ```bash result=$(add_swap) echo "$result" ``` #### 示例完整脚本 以下是一个完整的示例脚本，展示了如何定义和调用 `add_swap` 函数： ```bash #!/bin/bash # 定义函数 add_swap() { local size=$1 if [[ -z "$size" ]]; then echo "Error: No swap size specified." return 1 fi fallocate -l "${size}M" /swapfile chmod 600 /swapfile mkswap /swapfile swapon /swapfile echo "Swap of size ${size}MB added successfully." } # 调用函数 if [[ $# -eq 0 ]]; then echo "Usage: $0 <swap_size_in_MB>" exit 1 fi add_swap "$1" exit_code=$? if [[ $exit_code -ne 0 ]]; then echo "Function execution failed with code $exit_code." exit $exit_code fi ``` 此脚本接受一个参数（交换分区大小），并通过 `add_swap` 函数创建一个新的交换文件。 --- 问题
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

夜流冰

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付：¥1
获取中
扫码支付

您的余额不足，请更换扫码支付或充值

打赏作者

实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值