VirtualAlloc失败

最新推荐文章于 2021-03-20 20:05:26 发布
转载 最新推荐文章于 2021-03-20 20:05:26 发布 · 5.3k 阅读 · 0
文章标签：

#聊天 #null #测试 #任务 #service #windows

本文讨论了使用VirtualAlloc函数在Windows Server 2003环境下遇到的内存分配失败问题，通过测试发现每次分配都会占用核心内存，导致分配次数过多后报错。最终确认问题在于VirtualFree参数使用不当，未正确释放内存。
 引用 http://topic.youkuaiyun.com/u/20080128/09/c2678506-4193-4bfe-aaef-1c2b30520245.html
我在程序中用了VirtualAlloc进行内存申请，因为后面的一个函数需要按页大小分配的空间。

现在问题是，我的程序运行一段时间后（大约2个小时），会频繁的出现VirtualAlloc失败的情况，我不清楚是怎么出现的。

出现问题时，机器的内存很充裕， 我怀疑是因为内存碎片过多导致的，但现在还不知道怎么用工具查看，没办法确认。

程序的大概逻辑：
监听服务端口，接收客户端请求，按客户端的请求数据大小申请内存（VirtualAlloc），从本地文件读取数据，然后将数据发给客户端。
100  修改 删除 举报 引用 回复
进入用户个人空间
加为好友
发送私信
在线聊天
  • zzz3265
  • 等级:
  • 可用分等级：
  • 总技术分：
  • 总技术分排名：
发表于：2008-01-28 09:46:481楼 得分:5
出错的时候写日志, 参数, 返回值, LastError 都记录下来

VirtualAlloc, 当size为 0, 或者太大 都可能会出错
修改 删除 举报 引用 回复
进入用户个人空间
加为好友
发送私信
在线聊天
  • Dream_lover
  • 等级:
  • 可用分等级：
  • 总技术分：
  • 总技术分排名：
发表于：2008-01-28 09:52:272楼 得分:0
补充一下，调用方式如下：
void *addr =  ::VirtualAlloc (NULL,
                                    chunk_size,
                                    MEM_COMMIT,
                                    PAGE_READWRITE);
修改 删除 举报 引用 回复
进入用户个人空间
加为好友
发送私信
在线聊天
  • Dream_lover
  • 等级:
  • 可用分等级：
  • 总技术分：
  • 总技术分排名：
发表于：2008-01-28 09:57:053楼 得分:0
to zzz3265 ：

谢谢你的建议，我开始的确没有记录错误码和参数信息，后来发现这个问题后补充上去了。现在等这个问题重现。
修改 删除 举报 引用 回复
进入用户个人空间
加为好友
发送私信
在线聊天
  • zhoujianhei
  • 等级:
  • 可用分等级：
  • 总技术分：
  • 总技术分排名：
发表于：2008-01-28 10:04:054楼 得分:0
按照你的逻辑，可以不使用VirtualAlloc  的，直接内存映射文件不是很好吗？
修改 删除 举报 引用 回复
进入用户个人空间
加为好友
发送私信
在线聊天
  • Dream_lover
  • 等级:
  • 可用分等级：
  • 总技术分：
  • 总技术分排名：
发表于：2008-01-28 14:26:145楼 得分:0
错误码：
ERROR_NOT_ENOUGH_MEMORY

很奇怪，任务管理器上的内存是很多的，我每次只请求4K而已，也会报这个错？

to zhoujianhei：
我在后面用到了的分散读的接口ReadFileScatter，需要这样分配内存空间。
修改 删除 举报 引用 回复
进入用户个人空间
加为好友
发送私信
在线聊天
  • unsigned
  • 等级:
  • 可用分等级：
  • 总技术分：
  • 总技术分排名：

  • 3

    2

    5
发表于：2008-01-28 14:33:406楼 得分:0
错误码：
ERROR_NOT_ENOUGH_MEMORY

很奇怪，任务管理器上的内存是很多的，我每次只请求4K而已，也会报这个错？
=================================
能否提供详细的配置信息，以当前任务管理器上面显示的详细信息。特别是OS版本，内存及硬件配置，以及相关的启动参数；基本内存使用状况，未分页内存（核心内存，此项有一定的相关性，但并不是太大）等等。
修改 删除 举报 引用 回复
进入用户个人空间
加为好友
发送私信
在线聊天
  • Dream_lover
  • 等级:
  • 可用分等级：
  • 总技术分：
  • 总技术分排名：
发表于：2008-01-28 14:52:517楼 得分:0
修改 删除 举报 引用 回复
进入用户个人空间
加为好友
发送私信
在线聊天
  • Dream_lover
  • 等级:
  • 可用分等级：
  • 总技术分：
  • 总技术分排名：
发表于：2008-01-28 14:54:348楼 得分:0
基本信息如上图，现在已经频繁的出现virtualalloc失败的情况
修改 删除 举报 引用 回复
进入用户个人空间
加为好友
发送私信
在线聊天
  • Dream_lover
  • 等级:
  • 可用分等级：
  • 总技术分：
  • 总技术分排名：
发表于：2008-01-28 14:57:599楼 得分:0
OS版本：
windows server 2003
Enterprise Edition
Service Pack 2
修改 删除 举报 引用 回复
进入用户个人空间
加为好友
发送私信
在线聊天
  • Dream_lover
  • 等级:
  • 可用分等级：
  • 总技术分：
  • 总技术分排名：
发表于：2008-01-28 15:07:2210楼 得分:0
用PE查看的该进程的性能图片：
修改 删除 举报 引用 回复
进入用户个人空间
加为好友
发送私信
在线聊天
  • zhoujianhei
  • 等级:
  • 可用分等级：
  • 总技术分：
  • 总技术分排名：
发表于：2008-01-28 15:12:0411楼 得分:10
C/C++ code 
           

            
            

            void
               
            *
            addr   
            =
                 ::VirtualAlloc   (NULL, 
                                                                        chunk_size, 
                                                                        MEM_COMMIT
            |
            MEM_RESERVE, 
                                                                        PAGE_READWRITE);

试试。
修改 删除 举报 引用 回复
进入用户个人空间
加为好友
发送私信
在线聊天
  • Dream_lover
  • 等级:
  • 可用分等级：
  • 总技术分：
  • 总技术分排名：
发表于：2008-01-28 15:38:5112楼 得分:0
to zhoujianhei ：

谢谢你的建议，我正在尝试你的方法，不过效果要等一段时间。

MEM_COMMIT|MEM_RESERVE 这两个参数，按msdn上所说，应该包含一个就可以了，同时指定这两个参数，有什么好处呢？
修改 删除 举报 引用 回复
进入用户个人空间
加为好友
发送私信
在线聊天
  • unsigned
  • 等级:
  • 可用分等级：
  • 总技术分：
  • 总技术分排名：

  • 3

    2

    5
发表于：2008-01-28 16:08:5213楼 得分:70
刚测试过，问题关键并不在于使用的参数，而是VirtualAlloc之后，每个申请都要占用相应的核心内存，从而导致申请一定次数之后，核心内存（估计分配就单个应用程序有一定的限制）就达到限额，而报内存不足。

下面是两段测试代码(注:这是测试代码，正常业务代码不得仿写)

1.每次申请一个字节
C/C++ code 
           

            
            for
             (
            int
             i 
            =
             
            0
            ; i 
            <
             
            10240
            ; i
            ++
            ) {
  
            void
             
            *
            addr 
            =
             ::VirtualAlloc( NULL,
                               
            1
            ,
                               MEM_COMMIT,
                               PAGE_READWRITE);
  
            if
             (
            !
            addr)
    
            break
            ;
}



2.每次申请申请一个字节40960字节(大概为十页,我这里是2GB物理内存，如果物理内存较小，这个数字可以改小一点)
C/C++ code 
           

            
            for
             (
            int
             i 
            =
             
            0
            ; i 
            <
             
            10240
            ; i
            ++
            ) {
  
            void
             
            *
            addr 
            =
             ::VirtualAlloc( NULL,
                               
            40960
            ,
                               MEM_COMMIT,
                               PAGE_READWRITE);
  
            if
             (
            !
            addr)
    
            break
            ;
}


在我这里执行的结果是，前者分配的内存很少，依然会报出错误:ERROR_NOT_ENOUGH_MEMORY.而后者分配到了1.9G.
但是有一个相同的就是对于核心内存(未分页内存,打开任务管理器->转到[进程]页->选择[查看]菜单的[选择列...]菜单项->勾选[未分页缓冲池]，即可看到)，到报错的时候，都是1257k.
修改 删除 举报 引用 回复
进入用户个人空间
加为好友
发送私信
在线聊天
  • zhoujianhei
  • 等级:
  • 可用分等级：
  • 总技术分：
  • 总技术分排名：
发表于：2008-01-28 16:20:0114楼 得分:0
for (int i = 0; i < 10240; i++) {
  void *addr = ::VirtualAlloc( NULL,
                              40960,
                              MEM_COMMIT,
                              PAGE_READWRITE);
  if (!addr)
    break;
}
==============================================
如果这样用法，建议使用内存池。
你造成的碎片太多啦。
修改 删除 举报 引用 回复
进入用户个人空间
加为好友
发送私信
在线聊天
  • unsigned
  • 等级:
  • 可用分等级：
  • 总技术分：
  • 总技术分排名：

  • 3

    2

    5
发表于：2008-01-28 16:29:5415楼 得分:0
to 14楼，昏倒，我已经很明确写明是测试代码...
修改 删除 举报 引用 回复
进入用户个人空间
加为好友
发送私信
在线聊天
  • zhoujianhei
  • 等级:
  • 可用分等级：
  • 总技术分：
  • 总技术分排名：
发表于：2008-01-28 16:36:4916楼 得分:0
呵呵，眼花啦。
修改 删除 举报 引用 回复
进入用户个人空间
加为好友
发送私信
在线聊天
  • Dream_lover
  • 等级:
  • 可用分等级：
  • 总技术分：
  • 总技术分排名：
发表于：2008-01-28 17:04:1317楼 得分:0
unsigned 测试的结果和我刚才观察的现象比较相似，我的机器报错时，页面缓冲池是120K，非页面缓冲池是在1380K。

zhoujianhei 提到的内存缓冲池，应该是我解决这个问题的方法了。

多谢二位的建议，我先修改验证 ：）
修改 删除 举报 引用 回复
进入用户个人空间
加为好友
发送私信
在线聊天
  • unsigned
  • 等级:
  • 可用分等级：
  • 总技术分：
  • 总技术分排名：

  • 3

    2

    5
发表于：2008-01-28 17:13:3818楼 得分:0
zhoujianhei  提到的内存缓冲池，应该是我解决这个问题的方法了。
=================
如果是内存不足的话，那么缓冲池也未必解决得了问题，而如果是够用的话，那只能说明你调了VirtualAlloc申请了，没有配置的VirtualFree进行释放。
修改 删除 举报 引用 回复
进入用户个人空间
加为好友
发送私信
在线聊天
  • cnzdgs
  • 等级:
  • 可用分等级：
  • 总技术分：
  • 总技术分排名：

  • 5

    2

    13
发表于：2008-01-28 19:09:5519楼 得分:5
这个问题看起来像是18的说法。
修改 删除 举报 引用 回复
进入用户个人空间
加为好友
发送私信
在线聊天
  • nochater
  • 等级:
  • 可用分等级：
  • 总技术分：
  • 总技术分排名：
发表于：2008-01-28 19:41:0020楼 得分:10
这个问题基本上是代码写的不够严谨造成的
请你把注意力放在内存的释放上，或许你会找到答案
修改 删除 举报 引用 回复
进入用户个人空间
加为好友
发送私信
在线聊天
  • Dream_lover
  • 等级:
  • 可用分等级：
  • 总技术分：
  • 总技术分排名：
发表于：2008-02-05 15:18:5521楼 得分:0
VirtualAlloc之后，每个申请都要占用相应的核心内存，从而导致申请一定次数之后，核心内存（估计分配就单个应用程序有一定的限制）就达到限额，而报内存不足。

是这个道理， 应该是每次调用VirtualAlloc成功后，会在内核内存中进行相应的记录，从而导致内核内存增长。

我的问题是释放的地方用错了，VirtualFree的参数用了MEM_DECOMMIT，而不是MEM_RELEASE，所以没有真正释放内存。

谢谢大家的答复，要过年了，祝新年快乐 ：）
引发new/malloc动态申请内存失败的常见原因分析与总结
dvlinker的技术专栏
09-02 1万+
本文结合以往项目中遇到的多个问题实例，给大家详细总结一下引发动态申请内存失败的常见原因，以供借鉴或参考。
0day 第12章--12.3.3 Ret2Libc实战之利用VirtualAlloc
I have a dream
04-08 522
实验环境： Winxp sp3 VS2010 实验配置： 禁用优化、关闭GS、关闭safeseh、开启DEP 思路：当程序需要一段可执行内存时，可以通过kernel32.dll的VirtualAlloc申请一段具有可执行属性的内存。因此可通过利用此函数将shellcode复制到申请的内存空间中，以绕过DEP。 如何利用？ 将返回地址覆盖为VirtualAlloc的地址，参数输入进去即可。 ...
php 猴子补丁,如何解决Composer安装/更新错误：VirtualAlloc()失败：[0x00000008]
weixin_31408789的博客
03-20 865
本文概述一个非常简单的事实解释了在PHP中执行脚本期间基于VirtualAlloc和VirtualFree方法的错误, PHP没有足够的可用内存来执行它, 这就是抛出异常的原因, 你也会发现PHP致命错误消息”内存不足(已分配xxxxxx)(试图分配xxxx字节)”。例如, 最近使用最新版本的Composer尝试使用composer update指令更新软件包时, 会引发这种异常：Loading ...
VirtualAlloc
guojingguan的专栏
05-27 1755
VirtualAlloc是一个Windows API函数，它包含在windows系统文件Kernel32.dll中，编程时直接使用就可以了，不需要再下载。 　　该函数的功能是在调用进程的虚地址空间,预定或者提交一部分页 　　如果用于内存分配的话,并且分配类型未指定MEM_RESET,则系统将自动设置为0; VC声明 　　LPVOID VirtualAlloc( 　　LPV
关于出现VirtualAlloc pointer is null导致git崩溃的解决办法
li2008kui的专栏
12-04 9017
今天使用git时，发现Git Bash闪退，而使用Git GUI时提示以下错误： 0 [main] us 0init_cheap: VirtualAlloc pointer is null, Win32 error 487 AllocationBase 0x0, BaseAddress 0x68570000, RegionSize 0x1B0000, State 0x10000 C:\Program Files(x86)\Git\bin\sh.exe: *** Couldn't reserve space
VirtualAlloc函数使用总结
热门推荐
04-16 2万+
如果我们的程序需要动态内存的话，则迟早会调用Win32函数VirtualAlloc。但是程序也可以不调用VirtualAlloc，而是直接调用Windows堆函数或者CRT堆函数。不过，知道VirtualAlloc如何工作，可以帮助我们更好地理解这些调用函数。     首先，必须知道保留(Reserved)内存和占用（Committed）内存的含义。当内存放保留时，一段连续虚拟地址空间被留出。例
VirtualAlloc能分割原有大页内存属性吗
最新发布
08-29
printf("VirtualAlloc 失败，错误码：%lu\n", GetLastError()); return 1; } printf("大页内存分配成功：%p\n", pMem); // 提交内存 if (!VirtualAlloc(pMem, 2 * 1024 * 1024, MEM_COMMIT, PAGE_READWRITE)...
VirtualAlloc 申请可执行内存
hambaga的博客
05-17 1705
假设我有一个数组，存储了加法函数的二进制代码（硬编码） 加法函数 int __cdecl Plus(int x, int y) { return x + y; } 硬编码数组 // Plus 的硬编码 unsigned char code[] = { 0x55, 0x8B,0xEC, 0x81,0xEC,0xC0,0x00,0x00,0x00, 0x53, 0x56, 0x57, 0x8D,0xBD,0x40,0xFF,0xFF,0xFF, 0xB9,0x30,0x00,0x00,0x0
用反汇编调用VirtualAlloc
08-11
我们使用汇编语言调用Windows API中的VirtualAlloc函数进行内存分配。 步骤： 1. 声明需要使用的API函数（在汇编中通常使用extern声明外部函数） 2. 按照调用约定（stdcall）传递参数 3. 调用函数，并处理返回值...
详解VirtualAlloc函数参数数值
08-12
- 如果指定了地址，系统会尝试从该地址开始分配，但如果该地址已经被占用或者不符合对齐要求，分配可能会失败。 - 引用[3]中提到，当保留内存时，系统会以64KB为边界计算区域的起始地址（实际上，保留操作是以64...
redis VirtualAlloc/COWAlloc fail!
lijiecong的专栏
07-14 3985
最近在windows上玩redis，按默认启动redis就挂掉
进程注入，解决了VirtualAllocEx在傀儡进程申请基地址内存失败的问题。
字节跳动
04-02 3934
本文所贴出的PoC代码将告诉你如何通过CreateProcess创建一个傀儡进程（称之为可执行程序A），并把dwCreationFlags设置为CREATE_SUSPENDED，然后把另一个可执行程序（称之为可执行程序B）的内容加载到所创建的进程空间中，最终借用傀儡进程（A）的外壳来执行可执行程序B的内容。同时这段代码也会告诉你如何手工对Win32可执行程序进行重定位处理，以及如何从进程空间中取消...
Redis 服务启动闪退以及VirtualAlloc/COWAlloc fail!问题
bubbleTg的博客
07-25 1486
刚学习Redis,但是在启动服务的时候就闪退了。找到了几个解决方法。在此记录一下。 第一步：在解压的redis文件夹下新建一个start.bat（window启动一般都是xx.bat） 第二步：打开redis.windows.conf文件，限制内存 找到：maxheap，取消注释 然后配置：maxheap 3000000 第三步：在新建的start.bat文件中加入下面一句话（因为启...
vs2010 x64 malloc大内存失败的解决方法
psbins的博客
01-21 1047
vs2010 x64环境下无法malloc大内存的解决方法： malloc(整型的一个数)； 注意整型的数的类型不只有int，特别是开辟大内存的时候。 vs2010不智能，不能将malloc()中的参数转化为长整型long long. 给个例子： 在vs2010下， int aaa=16384; int bbb=22000; int sss=8; char星matric=(char星)malloc(aaa×bbb×sss); 会失败，而在vs2013会成功，就是因为vs2010不智能. 改为 ==char星
使用VirtualAlloc在0x400000处申请内存
hambaga的博客
08-10 1455
一开始老是申请内存失败，返回487，后来找到了解决方法，主要就是VirtualAlloc第三个参数不要写MEM_RESERVE，然后申请的空间也不能太大，否则还是会失败的。 假如你看到了这篇文章，我猜你可能是在做隐藏模块的作业，课上老师讲了两种做法，第一种就是让自己在高地址运行，把游戏注入到0x400000；另一种是把自己注入到游戏。我觉得第二种更好，虽然实现起来麻烦些，但是不容易出bug，第一种方式如果游戏主模块比较大，很可能会VirtualAlloc失败。 下面是简单的代码说明： LPVOID pIma
windows--virtualbox端口号映射失败的解决方法：NAT: set redirect TCP host
yanxiangyfg的专栏
04-20 5873
背景： 在windows 7中安装virtualbox虚拟机运行来如ubuntu、android等系统，当采用NAT模式启动时如果主机pc端需要和虚拟机内部镜像通信，则需要采用端口映射方式来实现，一个端口对应虚拟机内部一个服务。当virtualbox启动阶段会对这些端口进行映射，但是在windows中部分机器会出现端口映射失败的现象，端口映射失败日志如下：00:00:01.125577 NAT:
Git Bash 闪退，异常信息：VirtualAlloc pointer is null 解决方案
gaochen519的博客
11-28 983
通过cmd命令窗口，进入到安装Git所在盘符，运行rebase.exe -b 0x50000000 msys-1.0.dll文件就行了 C:\Users\gao>e: E:\Program Files (x86)\Git\bin>rebase.exe -b 0x50000000 msys-1.0.dll E:\Program Files (x86)\Git\bin>
不同内存分配方式的区别 VirtualAlloc HeapAlloc malloc new
Fire_Lord的专栏
01-14 5613
在进行Windows的学习过程中，经常看到不同的内存分配方式，例如VirtualAlloc, HeapAlloc, malloc和new。它们之间存在一些差异。 (1) VirtualAlloc PVOID VirtualAlloc(PVOID pvAddress, SIZE_T dwSize, DWORD fdwAllocationType, DWORD fdwProtect) V
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值