CUDA out of memory

在使用PyTorch进行深度学习时遇到了CUDA内存不足的问题,尝试了清空缓存、检查模型大小和数据量等方法,发现是数据处理在GPU上导致的负担过重。通过限制数据量可以暂时解决,但需要找到更有效的内存管理策略。

摘要生成于 C知道 ,由 DeepSeek-R1 满血版支持, 前往体验 >

RuntimeError: CUDA out of memory. Tried to allocate 4.35 GiB (GPU 0; 7.80 GiB total capacity; 4.37 GiB already allocated; 1.93 GiB free; 4.63 GiB reserved in total by PyTorch) If reserved memory is >> allocated memory try setting max_split_size_mb to avoid fragmentation. See documentation for Memory Management and PYTORCH_CUDA_ALLOC_CONF
在这里插入图片描述
不知原因
且运行代码在cpu上可正常运行,只是慢了点,在gpu上报错:CUDA out of memory

试了几个方法
1、torch.cuda.empty_cache()
没用
2、是否模型太大
确定模型加载完成后,代码才开始崩溃

3、是否数据太大
先放30个图片,崩溃
10个,可正常运行
20个,正常运行

原因,数据以及数据的处理在gpu上负担不了

小tricks:

import time
t1
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值