Caffe | Check failed: error == cudaSuccess (2 vs. 0) out of memory

最新推荐文章于 2020-11-17 15:21:33 发布

原创最新推荐文章于 2020-11-17 15:21:33 发布 · 5.4k 阅读

2 ·

CC 4.0 BY-SA版权

问题解决专栏收录该内容

40 篇文章

订阅专栏

本文探讨了在使用CUDA时遇到的GPU内存溢出错误，并提供了详细的解决方案。通常情况下，减少批大小是解决此问题的有效手段，但当批大小已降至最低时，则需要考虑其他可能的原因。

Check failed: error == cudaSuccess (2 vs. 0)  out of memory
*** Check failure stack trace: ***
Aborted (core dumped)

解决方案：

The error you get is indeed out of memory, but it's not the RAM, but rather GPU memory (note the the error comes from CUDA).

Usually, when caffe is out of memory - the first thing to do is reduce the batch size (at the cost of gradient accuracy), but since you are already at batch size = 1...

Are you sure batch size is 1 for both TRAIN and TEST phases?

确定要放弃本次机会？

福利倒计时

: :

立减 ¥

普通VIP年卡可用

立即使用

2014wzy

关注关注

1
点赞
踩
2

收藏

觉得还不错? 一键收藏
5
评论
分享

复制链接

分享到 QQ

分享到新浪微博

扫一扫
举报

举报

专栏目录

【caffe跑试验遇到错误：Check failed: error == cudaSuccess (2 vs. 0) out of memory】

hefei_cyp的博客

12-14

4万+

刚开始跑caffe试验，老是遇见各种错误。今天又遇见： I1214 09:32:19.428040 11425 net.cpp:748] Ignoring source layer loss F1214 09:32:19.515925 11425 syncedmem.cpp:64] Check failed: error == cudaSuccess (2 vs. 0) out of memo

【BUG FIX】Check failed: error == cudaSuccess (77 vs. 0) an illegal memory access was encountered

DaemonTao的博客

06-04

2046

环境： WIN10，vs2013前置操作：在caffe的nms.cu中添加box_nms_gpu(...)接口；在其中使用caffe自带的nms_mask(...)核函数；使用vs2013编译得到动态库；在自定义的程序中使用编译得到的动态库，使用box_nms_gpu(...)接口；其他人所遇到的问题：我这是由于加了初始化models导致的，移除后又能...

5 条评论您还未登录，请先登录后发表或查看评论

Caffe 分类问题 Check failed: error == cudaSuccess (2 vs. 0) out of memory

weixin_34238642的博客

05-23

360

如果图片过大，需要适当缩小batch_size的值，否则使用GPU时可能超出其缓存大小而报错

Caffe FCN Test | Check failed: error == cudaSuccess (2 vs. 0) out of memory

lanyuxuan100的博客

04-21

4475

在使用caffe跑FCN测试的时候，提示如下错误： Check failed: error == cudaSuccess (2 vs. 0) out of memory 是内存溢出，而且是cuda报出的，那么就是gpu的缓存溢出了。遇到这种情况，首先要看的就是训练与测试的batch_size了，而训练过程没有问题，说明训练的batch_size没有问题；测试过程出现的这个问题，查看的f

Check failed: error == cudaSuccess (2 vs. 0) out of memory 错误。

miao0967020148的专栏

04-11

2697

小编近期在使用caffe进行训练时，常出现 Check failed: error == cudaSuccess (2 vs. 0) out of memory 错误。从错误提示可以看出是内存不够了。所以小编就加了一个8G 内存条（刚好手边有），可是加上了并没有多大的作用啊，还是照样报错。后来才找到解决方法。解决方法：batch_size太大了，一次性读入的图片太多了，所以就超出了显存。因此需...

caffe error :Check failed: error == cudaSuccess (2 vs. 0) out of memory

qq_34650787的博客

05-29

1595

用caffe 训练网络时，遇到了Check failed: error == cudaSuccess (2 vs. 0) out of memory 意思是gpu内寸不够用，输入： nvidia-smi 可以看到最后两个线程占用gpu内存很大。需要使用命令： sudo kill -9 [线程pid] 把不需要的线程杀死，然后就能愉快的训练了...

Caffe SSD编译、训练及测试

楚兴

11-25

3140

SSD采用VGG16作为基础模型，然后在VGG16的基础上新增了卷积层来获得更多的特征以用于检测。SSD的网络结构如上图所示（上面是SSD模型，下面是Yolo模型），可以明显看到SSD利用了多尺度的特征图做检测。安装 clone代码（假设代码clone到$CAFFE_ROOT目录）。 git clone https://github.com/weiliu89/caffe.git cd ca...

caffe常见错误总结

shiyonglian的博客

09-05

1147

Caffe常见错误在使用深度学习框架caffe，搭建网络训练过程中总会遇到这样或那样的问题，下面我将自己在学习过程中遇到的常见问题进行总结【会陆续更新】 out of memory (2 vs. 0) Check failed: error == cudaSuccess (74 vs. 0) misaligned address cuda invalid address error ...

Caffe_SSD训练时遇到的问题罗列

qq_29893063的博客

07-31

536

1.Check failed: error == cudaSuccess (2 vs. 0) out of memory 解决方法：问题是是内存溢出，而且是cuda报出的，那么就是gpu的缓存溢出了。修改train.prototxt中的batch_size，调小一点试试应该就可以了 2.Check failed: num_priors_ * num_classes_ == bottom[...

caffe报错（3）Check failed: error == cudaSuccess (2 vs. 0) out of memory

weixin_42535423的博客

12-27

2214

在使用caffe测试的时候，提示如下错误： Check failed: error == cudaSuccess (2 vs. 0) out of memory 是内存溢出，而且是cuda报出的，那么就是gpu的缓存溢出了。遇到这种情况，首先要看的就是训练与测试的batch_size了，而训练过程没有问题，说明训练的batch_size没有问题；

Check failed: error == cudaSuccess (2 vs. 0) out of memory

u011215144的博客

11-08

1298

finitune googlenet时，train未报错，test时报了， stackflow里面的回答 1.减小mini_batch 2.减小图片大小 3.升级GPU（stackflow里面一般都是8G-12G的，别的CS的实验室好像直接就用的GTX 1080,可以考虑）

Check failed: error == cudaSuccess (2 vs. 0) out of memory Abort(core dumped)

xiaxuesong666的博客

08-01

874

在运行crowed net的时候出现这个错误，主要原因是显存超出，我们通过以下方法查看显存的使用情况：nvidia-smi如果有其他的程序占用显存，将这些程序停止以后，看一下，是否可以运行了，我停止那些程序以后，可以运行了，如果还不可以的话，需要将train.prototxt中的文件train和test的batch_size调小一点。

使用openpose出现Check failed: error == cudaSuccess (2 vs. 0) out of memory错误

YoJayC的博客

11-17

3026

在使用openpose的docker执行命令时，出现下述错误提示 root@1015281c1858:/openpose# python3 consecutive_openpose.py Starting OpenPose demo... Configuring OpenPose... Starting thread(s)... F1117 06:45:27.081745 90 syncedmem.cpp:71] Check failed: error == cudaSuccess (2 vs.

caffe failed: error == cudaSuccess (2 vs. 0) out of memory

scarlette唐从入门到放弃

05-06

5390

caffe failed: error == cudaSuccess (2 vs. 0) out of memory 原因是gpu的内存溢出，可是我用的是k20c，有4G内存，这个才需要2.8g，应该可以啊。但是换到了titan z上面，就可以了，真的不知道为什么

已经解决：OpenPose报错：error == cudaSuccess (2 vs. 0) out of memory

Caffe | Check failed: error == cudaSuccess (2 vs. 0) out of memory

Check failed: error == cudaSuccess (2 vs. 0) out of memory *** Check failure stack trace: *** Aborted (core dumped)

解决方案：

The error you get is indeed out of memory, but it's not the RAM, but rather GPU memory (note the the error comes from CUDA).

Usually, when caffe is out of memory - the first thing to do is reduce the batch size (at the cost of gradient accuracy), but since you are already at batch size = 1...

Are you sure batch size is 1 for both TRAIN and TEST phases?

`Check failed: error == cudaSuccess (2 vs. 0) out of memory * Check failure stack trace: * Aborted (core dumped)`