图像数据读取及数据扩增方法

最新推荐文章于 2024-08-30 15:13:45 发布
原创 最新推荐文章于 2024-08-30 15:13:45 发布 · 2.1k 阅读 · 9 ·
CC 4.0 BY-SA版权
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。

本文由Datawhale成员王程伟分享，解析图像读取的5种方法（OpenCV, Pillow, matplotlib, scipy, skimage）与Pytorch数据读取，详细阐述常用数据集与自定义数据集的读取方式。此外，还探讨了数据扩增的重要性，包括基于图像处理和深度学习的数据扩增技术，并介绍了使用Pytorch进行数据增强的方法。" 131299585,10999271,使用C语言构建图书管理系统,"['c语言', '链表', '开发语言', '图书管理系统']

 Datawhale干货 

作者：王程伟，Datawhale成员

本文为干货知识+竞赛实践系列分享，旨在理论与实践结合，从学习到项目实践。（零基础入门系列：数据挖掘/cv/nlp/金融风控/推荐系统等，持续更新）

本文对计算机视觉赛事中，数据读取及数据扩增两部分内容进行解析，同时进行了直播答疑分享（今晚8点在阿里天池直播分享，录播上传后原链接可回看）：

https://tianchi.aliyun.com/course/live?spm=5176.12586971.1001.1.11be6956fkKgJ8&liveId=41168

分享大纲

1. 图像读取

  • 常用图像读取的5种方法及其比较总结；

2. Pytorch数据读取

  • 介绍了常用数据集及自定义数据集读取的方法；

3. 数据扩增

  • 基于图像处理的数据扩增、基于深度学习的数据扩增及使用Pytorch的数据扩增。

图像读取

常用的图像数据读取方法如下：

最低0.47元/天 解锁文章
Datawhale
关注
图片提取数据
09-23
采用python，opencv开源库实现图片提取曲线数据 使用说明： openpic 可以选择采用自动采集测点数据或手动采集测点数据 操作过程：第一步裁剪,crop, 鼠标响应step_crop, 鼠标左键选裁剪的矩形区域，选中后键盘n表示确认进入下一步骤； 无需裁剪时键盘o直接进入下一步骤；esc表示取消，退回到开始 第二步矫正，correction，鼠标响应step_correction, 鼠标左键点选梯形矫正的四个顶点， 键盘u左上，i右上，j左下，k右下，切换当前有效操作做的顶点， 键盘w up, s down, a left, d right 或上下左右键，微调鼠标选点位置，detail display放大显示当前选点的细节； 键盘t键操作矫正，n键表示确认矫正结果进入下一步骤，b键表示取消矫正重新选梯形顶点 第三步坐标系，coordinate，鼠标响应step_coordinate, 鼠标左键点选xy坐标系的原点、x轴最大刻度点、y轴最大刻度点。 xy轴的坐标刻度值由选择图片窗口的x、y最大最小值决定，xy轴必须原点处交汇但可以从非零开始分别计算刻度 键盘u y轴，j 坐标原点，k x轴，切换当前鼠标点选的有效点 键盘w up, s down, a left, d right 或上下左右键，微调鼠标选点位置，detail display放大显示当前选点的细节； 默认图片已经矫正，坐标系仅支持直角坐标系，在设置坐标系时原点可以任意移动，x轴y轴只能依据原点位置在直角轴上移动 键盘n表示确认坐标系设置结果进入下一步，b表示取消退回到上一步，esc退回到开始 第四步采集数据：手动采集manual_sample中使用sample_points，鼠标响应step_sample_points，鼠标左键点选要采集的测点，键盘n表示确认选择开始选下一个点 键盘o表示选择完输出测点数据到csv文件。 键盘w up, s down, a left, d right 或上下左右键，微调鼠标选点位置，detail display放大显示当前选点的细节； 自动采集auto_sample中使用tracecolor，鼠标响应step_color_picker。自动采集原理为先选择曲线，然后自动等间隔采集曲线上点 开始界面中没有自动采集点数，在使用auto的函数调用时添加。 自动采集以tracecolor颜色提取构建曲线，曲线点数据平滑，间隔重采样为主要工作过程。在图片中存在同色非相关区域时，可采用颜色提取刷，手动确定曲线的有效范围 键盘l切换提取刷开关，提取刷功能开启时，鼠标右键按住滑动刷出有效的采集范围。 鼠标左键点选的位置作为提取颜色，同时具备单一颜色固定阈值提取曲线和多个颜色自动确定阈值范围的提取曲线两种模式。 键盘p选择鼠标位置的点颜色作为多个颜色参考提取，移动鼠标位置（或键盘移动）采用p键选择多个颜色点，确定提取阈值范围 键盘n表示完成颜色选择开始曲线提取，显示提取后黑白曲线图，键盘b取消提取退回上一步重新操作 esc取消退回到开始 键盘o表示接受曲线提取结果，开始自动间隔采集计算曲线上点，并输出csv文件
如何提取图像中的数据
04-19
从事科研的老师和同学们在撰写论文时，经常需要将文献中的曲线与自己的结果进行对比，为获取原始数据，最靠谱的方法当然是找原作者要。如果没有要到呢？本资源提供了两个程序，两种不同思路来从一副图像中获得原始近似数据。
图像数据读取与扩增
o6eceici的博客
05-23 695
这里写自定义目录标题一、图像数据的读取1.matplotlib库2.pillow库pillow库的概述pillow库进行图像处理 一、图像数据的读取 1.matplotlib库 import matplotlib.pyplot as plt img=plt.imread('.../1.png') print(img.shape) print(img.dtype) print(type(img)) plt.imshow(img) plt.show() imread读取的图片为numpy.ndarry的数组，数
图片数据集的读取
aswla的博客
03-14 1565
像这样，图片分成了两个文件夹，一个是train,一个是val,如果数据集过大，可以自定义一个类读取数据集。 标签有两种存贮方式 # 1.文件名为标签 # 2.写有对应的txt文本里有每一个图片所对应的标签 如果文件名为标签，并且类别较多，我们可以用一个列表去存贮这个类别 import os label = [] root_dir = "E:\\pycharm_data\\read_Data1\\hymenoptera_data\\train" img_label = os.list...
图像分类数据集的读取
YUNFanZ的博客
02-02 810
图像分类数据集 (MNIST数据集) :cite:LeCun.Bottou.Bengio.ea.1998 (是图像分类中广泛使用的数据集之一，但作为基准数据集过于简单。 我们将使用类似但更复杂的Fashion-MNIST数据集) :cite:Xiao.Rasul.Vollgraf.2017。 #安装d2l库，（jupyter notebook） ! pip install d2l ! pip install matplotlib==2.2.3 %matplotlib inline import tenso
图像识别的数据增强与augmentation技术
AI天才研究院
12-27 1276
1.背景介绍 图像识别技术在近年来发展迅速，已经成为人工智能领域的一个重要分支。然而，图像识别算法的性能和准确性依赖于模型训练所使用的数据集的质量和规模。在实际应用中，收集大量高质量的图像数据是非常困难和昂贵的。因此，数据增强(data augmentation)技术成为了图像识别任务中不可或缺的一部分。 数据增强技术的主要目的是通过对现有数据进行变换、修改或扩展，生成新的数据样本，从而增加训...
计算机视觉CV-Pytorch 数据读取与数据扩增
lw19155275856的博客
04-29 900
计算机视觉CV-Pytorch 数据读取与数据扩增
数据读取与数据扩增
weixin_43867368的博客
12-22 264
数据读取与数据扩增1 常用数据集简介：1.1 MNIST数据集1.2 CIFAR-10数据集1.3 ImageNet数据集1.4 MS COCO1.5 PASCAL VOC数据集2 pytorch数据集及读取方法简介2.1 pytorch自带的数据集读取与使用2.2 数据增强简介插入链接与图片如何插入一段漂亮的代码片生成一个适合你的列表创建一个表格设定内容居中、居左、居右SmartyPants创建一个自定义列表如何创建一个注脚注释也是必不可少的KaTeX数学公式新的甘特图功能，丰富你的文章UML 图表FL
图像数据读取和数据扩增
qq_56551150的博客
08-10 514
图像数据 ➡ 图像索引文件 ➡ 使用Dataset构建数据集 ➡ 使用DataLoader读取数据。
数据读取与数据扩增方法
Datawhale
06-07 1257
↑↑↑关注后"星标"Datawhale每日干货 &每月组队学习，不错过Datawhale干货作者：樊亮、黄星源、Datawhale优秀学习者本文对图像数据读...
从图片读取数据
自由小兵儿
07-10 4613
为什么要从图片中读取数据呢？因为苦于没有实际准确的数据，只能用图瞎编了…呜呜呜师哥给我推荐Origin。但是尼，我电脑没有Origin，也懒的装。于是给大家推荐一下几Mb的小软件软件 软件安装有手就行，这里就不介绍了。通过点击->->将软件切换为英文（英文大佬请忽略）通过软件左上角的->可以打开需要提取数据的图片（最好时jpg格式的,png格式的不可以）打开完，点击->，效果如下图所示...
bmp图片数据提取
11-01
1. 支持24位与32位的BMP图片 2. 转换结果没有字对齐（3个字节一个像素依次排列） 3. 32位情况Aero通道被去除 4. 像素点序列与原图片相同（上下颠倒，左右正常） 注：VS2008工程，数据存储到txt文档
科研论文图片数据提取工具：GetData2.20
09-05
还在为科研论文图片无法得到数据发愁吗？就让“科研论文图片数据提取工具：GetData2.20”来帮你轻松实现论文图片的数据提取，只要有图就有数据！还附上详细的图文教程，是科研工作的必备软件！
图片曲线数据提取
08-09
用matlab编写的提取图片数据的程序，带GUI界面，原理很简单。
【MATLAB源码】图片数据点提取.zip
06-09
function GRABIT Extracts data points from an image file. % % GRABIT starts a GUI program for extracting data from an image file. % It is capable of reading in BMP, JPG, TIF, GIF, and PNG files (anything % that is readable by IMREAD). Multiple data sets can be extracted from a % single image file, and the data is saved as an n-by-2 matrix variable in % the workspace. It can also be renamed and saved as a MAT file. % % Following steps should be taken: % 1. Load the image file. % 2. Calibrate axes dimensions. You will be prompted to select 4 points % on the image. Zoom and pan enabled. % 3. Grab points by clicking on points. Right-click to delete a point. % Image can be zoomed and panned. % 4. Multiple data sets will remain in memory so long as the GUI is open. % Variables can be renamed, saved to file, or edited in Array Editor. % % Panning is achieved by clicking and dragging on the image. Double-click % to center view. Right click and drag to zoom in and out. In addition, % there are keyboard shortcuts for zooming: % - zoom in % - zoom out % - reset view % % This code will also work for extracting data points from a tilted or a % skewed image (even upside-down or mirrored). The calibration stage % ensures that the imperfect orientation or quality of the image is % accounted for. % % The types of files that will most likely work are BMP, JPG, TIF, GIF (up % to 8-bit), and PNG files. Basically, any format supported by the IMREAD % is accepted. % % GRABIT(FILENAME) will start the GUI program and open the image file % FILENAME.
图片数据提取_太狠了！这个小软件可以直接提取图片数据！！！！！
热门推荐
weixin_39624733的博客
12-18 2万+
今天分享一款牛X的数据提取软件：GetData。可以直接百度在官方下载软件科研小白也能轻松Hold住哦~GetData是图片数据提取软件里最为出名的一款。它的界面简洁，使用简单，软件界面如下jgp、tig、bmp等常见的图片格式都支持，但不支持png格式，需要注意。图片导入后效果如下，滚动鼠标中键即可缩放图片鼠标中键滚动放大缩小图片好了，热身好了，就要提取数据了。1. 首先，点击设置坐标...
Python数据获取——图片数据提取
m0_57472099的博客
04-30 2550
比如我随便从手机上传一张图片到我的电脑里，通过python可以获取这张照片的所有信息。如果是数码相机拍摄的照片，我们在属性里可以找到照片拍摄的时间，拍摄的经纬度，海拔高度。那么这些信息有什么作用呢？有很多功能…比如等等，用户喜欢拍摄照片的季节，时间点，所使用的相机的参数指标可以反应出，对于其拍摄的内容，我们可以通过AI的方式对照片的内容信息进行提取，从而。一、利用exifread提取图片的EXIF信息exifreadEXIF。
通过Origin提取图片数据
最新发布
weixin_43723625的博客
08-30 3012
通过Origin提取图片数据
快速入门Torch读取自定义图像数据集
weixin_43457608的博客
01-16 849
学习新技术当然首先要看官网了就这？？？官方提供了许多内置好的数据集，但是我需要自定义啊！！！我是谁？我在哪？我在干什么？完全不知道如何实现好吧完结撒花？我的数据集格式和ImageFolder需要的格式不一样最简单的方法当然是写个脚本整理为官方需求的格式，但是我不忘初心，说自定义就是自定义，copy99%也要自定义，而且移动数据的成本高，改改代码读取逻辑就能完成当然要改代码了献上完整自定义数据集代码还好官方上面文字说需要继承Dataset这个抽象类，实现__getitem__和__len__方法就ok了。
Datawhale零基础CV赛事分享：数据读取与扩增
"Datawhale团队的开源分享，关于零基础学CV的天池平台街景字符识别比赛的第二场直播讲座，主要内容包括数据读取和数据扩增，使用Pytorch进行深度学习操作。" 在数据科学和人工智能领域，尤其是深度学习和机器学习中...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值