FloatingPointError: Predicted boxes or scores contain Inf/Nan. Training has diverged.

最新推荐文章于 2024-09-14 11:41:50 发布
原创 最新推荐文章于 2024-09-14 11:41:50 发布 · 3.5k 阅读 · 2 ·
CC 4.0 BY-SA版权
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
文章标签：

#深度学习 #pytorch

部署运行你感兴趣的模型镜像

深度学习训练PointRend网络时，configs文件是"PointRend/configs/InstanceSegmentation/pointrend_rcnn_X_101_32x8d_FPN_3x_coco.yaml"，因为两个人同时使用服务器GPU的原因，我把batch_size设置为1才能开始训练，但迭代600多次就抛出错误：

Error:FloatingPointError: Predicted boxes or scores contain Inf/Nan. Training has diverged.

    经查阅，是learning_raye设置太大的原因，当时我的学习率是0.02，后来改成0.001就可以完整训练了。参考博客：https://ask.youkuaiyun.com/questions/7665290 

您可能感兴趣的与本文相关的镜像

TensorFlow-v2.15

TensorFlow-v2.15

TensorFlow

TensorFlow 是由Google Brain 团队开发的开源机器学习框架,广泛应用于深度学习研究和生产环境。 它提供了一个灵活的平台,用于构建和训练各种机器学习模型

wangmeili@
关注
报错FloatingPointError: Loss became infinite or NaN at iteration=88!
微信号：Custom-Software
08-05 2544
请问一下这个是什么错误，代码运行迭代循环了一段时间之后就报这个错误? 代码都没动。先谢 Traceback (most recent call last): File "/home/yuan/桌面/shenchunhua/CondInst-master/train_net.py", line 255, in <module> args=(args,), File "/home/yuan/anaconda3/envs/AdelaiNet/lib/python3.7/site...
Pytorch训练模型损失Loss为Nan或者无穷大（INF）原因
热门推荐
ytusdc的博客
02-12 7万+
常见原因-1 一般来说，出现NaN有以下几种情况： 相信很多人都遇到过训练一个deep model的过程中，loss突然变成了NaN。在这里对这个问题做一个总结： 1.如果在迭代的100轮以内，出现NaN，一般情况下的原因是因为你的学习率过高，需要降低学习率。可以不断降低学习率直至不出现NaN为止，一般来说低于现有学习率1-10倍即可。 2.如果当前的网络是类似于RNN的循环神经网络的话，出现NaN可能是因为梯度爆炸的原因，一个有效的方式是增加“gradient clipping”（梯度截断来解决）
metaRCNN安装指南
weixin_46822502的博客
09-28 1427
首先从GITHUB上下载程序 www.github.com/ucbdrive/few-shot-object-detection 根据README.md配置 Conda 环境，其中python =3.6 安装torch cuda 1.6 with (your cuda version) 卸载掉本机的pycocotools （重要） S1 :python -m pip install --upgrade pip S2: 查看pycocotool本机地址： pip install pycocotools S3.
VOC数据集上自己训练FSOD: Few shot object detection
苏打水的杯子的博客
10-04 1740
问题汇总： 1、BrokenPipeError: [Errno 32] Broken pipe 这个问题我直接将torch.utils.data.dataloader lines:185中的self.num_workers强制设置成1 2、FloatingPointError: Predicted boxes or scores contain Inf/NaN. Training has diverged. batch_size调大解决此问题。 ...
FloatingPointError: Predicted boxes or scores contain Inf/NaN. Training has diverged.
u011641070的博客
09-14 490
目标检测报错：FloatingPointError: Predicted boxes or scores contain Inf/Nan. Training has diverged.
Predicted boxes or scores contain Inf/NaN. Training has diverged
苏打水的杯子的博客
03-30 588
这个问题是detectron的版本不对，需要切换版本。
PS E:\Afy> & D:/Python/python.exe e:/Afy/jiaojiance.py e:\Afy\jiaojiance.py:4: SyntaxWarning: invalid escape sequence '\A' img=cv2.imread('E:\Afy\j1.png') Traceback (most recent call last): File &quot;e:\Afy\jiaojiance.py&quot;, line 14, in <module> res=np.int0(res) ^^^^^^^ File &quot;D:\Python\Lib\site-packages\numpy\__init__.py&quot;, line 427, in __getattr__ raise AttributeError(&quot;module {!r} has no attribute &quot; &quot;{!r}&quot;.format(__name__, attr)) AttributeError: module 'numpy' has no attribute 'int0'. Did you mean: 'int8'?
最新发布
04-30
另外，用户提到的另一个引用[1]中出现了numpy.sqrt(-1)导致的FloatingPointError，这可能和当前问题无关，但需要确保用户安装的numpy版本正确，并且代码中没有其他潜在问题。 解决步骤可能包括： 1. 检查numpy的...
FloatingPointError.md
12-02
在无法避免某些特殊浮点数值（如无穷大、NaN等）的情况下，可以在代码中使用`try-except`结构来捕获`FloatingPointError`异常，并进行适当的错误处理。这种方法主要是对异常情况的应对，但并不能根本解决浮点数的...
DEFRCN代码复现记录
m0_48896123的博客
01-25 1482
大部分问题就像参考博客里大佬写的那样能够解决，下面写一些遇到的其他问题。解决完以上问题就能够成功运行训练了。简单记录以下运行开源项目的过程。
报错FloatingPointError: Loss became infinite or NaN at iteration=1099!
Asuyio的博客
04-01 3348
报错FloatingPointError: Loss became infinite or NaN at iteration=1099! [04/01 15:05:09] d2.engine.train_loop ERROR: Exception during training: Traceback (most recent call last): File "/root/detectron2/detectron2/detectron2/engine/train_loop.py", line 138
Only Tensors of floating point and complex dtype can require gradients问题解决方案
rothschild666的博客
03-10 5635
Only Tensors of floating point and complex dtype can require gradients
[深度学习从入门到女装]detectron2源码阅读-Trainer
炼丹师
12-02 4162
detectron2是facebook的开源目标检测框架 /tools/train_net.py是进行网络训练和评估的主要文件，我们从这里开始阅读 if __name__ == "__main__": #os.environ['CUDA_VISIBLE_DEVICES'] = '0,1' # --config-file --resume --eval-only ...
python减法报错_python – numpy FloatingPointError：减法中遇到的值无效 – 不可重现？...
weixin_39616003的博客
01-14 1850
我遇到了FloatingPointError：在一段测试代码中减去了遇到的无效值.异常开始在代码本身没有任何变化的情况下被提出,所以我在理解它时遇到了很多麻烦.我的问题：在减去异常时遇到无效值的原因是什么？为什么在python numpy的不同安装上它的行为会有所不同？细节：此MWE不会引发FloatingPointError：>>> import numpy as np>...
训练模型的时候， Warning: NaN or Inf found in input tensor 解决办法
qq_38284961的博客
11-06 2万+
一般出现这句话的时候表示，模型训练过程中出现梯度消失或者梯度爆炸。 更改方式是降低初始学习率，比如加入初始学习率是0.1那么就将它改成0.01。 ...
评论
成就一亿技术人!
拼手气红包6.0元
还能输入1000个字符
 
红包 添加红包
表情包 插入表情
表情包 代码片
 条评论被折叠 查看
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值