模型训练，PIL读图出现警告和中断问题

最新推荐文章于 2024-04-02 18:46:17 发布

原创最新推荐文章于 2024-04-02 18:46:17 发布 · 3.3k 阅读

1 ·

CC 4.0 BY-SA版权

工具专栏收录该内容

10 篇文章

订阅专栏

本文详细介绍了在使用Python的PIL库处理图片时，遇到的警告与中断问题及其解决方案。包括忽略EXIF数据异常警告和处理截断图片错误的方法。

1.出现警告问题

/home/flyingbird/.conda/envs/pytorch-0.4/lib/python3.6/site-packages/PIL/TiffImagePlugin.py:786: UserWarning: Possibly corrupt EXIF data.  Expecting to read 131072 bytes but only got 13120. Skipping tag 60219
  " Skipping tag %s" % (size, len(data), tag)

原因
可能是图片读取时，对应的EXIF异常，检查确认图片格式，或者删除图片
解决方法：

import warnings
warnings.filterwarnings('ignore')

2.出现中断问题

IOError: image file is truncated (5 bytes not processed)

原因
可能是PIL根据文本读取训练图片时，图片已经损坏或者格式问题导致；
解决方法：

from PIL import ImageFile
ImageFile.LOAD_TRUNCATED_IMAGES = True

确定要放弃本次机会？

福利倒计时

: :

立减 ¥

普通VIP年卡可用

立即使用

_腾飞

关注关注

0
点赞
踩
1

收藏

觉得还不错? 一键收藏
0
评论
分享

复制链接

分享到 QQ

分享到新浪微博

扫一扫
举报

举报

专栏目录

python库PIL抛出No space left on device和Too many open files

qm5132的博客

07-05

1953

使用Python PIL Image.open读取大量图片时候，遇到“OSError: [Errno 28] No space left on device”等问题，总结下问题： 1、“Too many open files”问题原因：PIL的Image.open操作是lazy operation（类似Spark的tranform操作，即只是保存操作流程，需要调用action操作后才真正执行...

对于PIL中打开图片时出现警告导致pytesseract识别图片验证码时报错

大戴的博客

03-20

6547

一、问题的出现为了做个自动选课的小脚本，废了不少功夫。感觉比自己手动抢麻烦了许多。不过，谁让咱家就喜欢倒腾，所以，在选课期间，花了一天的时间把这个自动抢课脚本搞好了，当然还有许多需要继续完善的地方，就留在后期慢慢修正吧。在这个过程里，遇到头疼的问题估计就是模仿选课请求和自动登录这两件事。选课暂且不谈，在此我只想将一个在自动登录上让我有些莫名其妙的问题和对他的解决方法给阐述了。但愿有同样问题...

参与评论您还未登录，请先登录后发表或查看评论

PointPillars（一）环境搭建/模型训练问题汇总

czzc1990的博客

04-14

2295

asassa

模型训练过程中可能出现的问题

weixin_60934320的博客

04-22

898

先训练些比较简单的model，再训练比较复杂的model，如果较复杂的model结果反而不如较简单的，就说明是optimization出了问题。可以将自己的资料分成多份，分别作为训练资料和预测资料，以选择最好的模型。模型训练结果越来越好，但预测结果在达到一定程度后越来越差。训练资料与测试资料差异较大。

python中opencv 与 PIL读图区别，以及与Numpy转换

IT_BOY__的博客

06-02

1874

之前在图片预处理上就遇到过opencv和PIL，很纠结PIL读取的图片不好在opencv上使用，或者是opencv读取的图片不好在PIL上使用，以及它们如何转换为numpy类型。现在有时间，做个小实验总结一下附上代码 import numpy as np import cv2 from PIL import Image import matplotlib.pyplot as plt img_cv2 = cv2.imread("jena.jfif") img_PIL = Image.open("jena.j

python GDAL和PIL图像转换

llc的博客

10-26

831

读取数据先来对比一下GDAL和PIL数据读取的结果 GDAL： ds: gdal.Dataset = gdal.Open('test.jpg') gdal_arr = ds.ReadAsArray() print(gdal_arr.shape) # (3, 256, 256) PIL： img = Image.open('test.jpg') pil_arr = np.array(img) print(pil_arr.shape) # (256, 256, 3) 转换发现GDAL和PIL的图像存

详解Python Opencv和PIL读取图像文件的差别

09-18

由于PIL和OpenCV处理图像的方式略有不同，可能会影响到模型学习到的特征，从而影响训练过程的收敛速度和最终的模型性能。因此，开发者在选择图像预处理方法时，应根据具体任务的需求和性能表现来决定使用哪个库。 ...

怎么暂停python模型训练_pytorch 快速入手训练模型

weixin_39888943的博客

12-08

5252

你已经了解了如何定义神经网络，计算损失值和网络里权重的更新。现在测试怎么处理数据通常来说，当你处理图像，文本，语音或者视频数据时，你可以使用标准 python 包将数据加载成 numpy 数组格式，然后将这个数组转换成 torch.*Tensor图像数据，可以用 Pillow，OpenCV语音数据，可以用 scipy，librosa文本数据，可以用 NLTK 和 SpaCy特别是对于视觉，我们已经...

踩坑记录 PIL与Opencv读取图像的差别

aoyou19的博客

08-04

2643

pil,opencv读取图像

基于Python+PIL的图片损坏检测Demo

刘勇的博客

09-09

550

基于Python+PIL的图片损坏检测

pytorch----神经网络中由于PIL引起的错误

agonysome的博客

09-07

761

1、RuntimeError: output with shape [1, 128, 128] doesn‘t match the broadcast shape [3, 128, 128] 报错原因：输入图片需要是RGB空间图片而不能是灰度图，所以导致张量的通道数不匹配。解决方法：知道了问题的原因之后问题就变得好解决了，我的解决思路是用opencv或者是PIL包下面的图形处理函数，把输入的图片从灰度图转为RGB空间的彩色图。这种方法可以适合数据集中既包含有RGB图片又含有灰度图的情况。解决代码如下：

mmdetection 训练时 OSError: image file is truncated (** bytes not processed) 问题解决

chhj_292

04-02

1310

使用 mmdetection 框架进行 swin transformer 模型训练时，训练到一定的步骤会报错“OSError: image file is truncated (** bytes not processed)”且训练中断和进程退出。这里有一个修复思路：https://blog.csdn.net/qq_34097715/article/details/109646082。如果增加配置：color_type=‘unchanged’，pillow 尝试用 numpy 读取图片，依然会报错。

3D目标检测--PointPillars论文和OpenPCDet代码解读

weixin_45080292的博客

04-18

4422

PointPillars是一种用于三维物体检测的深度学习模型，其主要思想是将三维点云数据转化为二维的BEV（Bird’s Eye View）视角下的特征图，以实现在计算上的高效性和准确性。

样本不均衡常见解决方法