数据集生成方法：Python读取txt文件中的URL路径并下载图片

最新推荐文章于 2025-06-08 21:56:05 发布

原创最新推荐文章于 2025-06-08 21:56:05 发布 · 4.3k 阅读

6 ·

CC 4.0 BY-SA版权

DataSet 专栏收录该内容

10 篇文章

订阅专栏

本文介绍了一个用于从 ImageNet 下载特定类别图片的 Python 脚本。该脚本能够读取指定的文本文件获取图片 URL，并将图片下载到本地指定文件夹。示例展示了如何为鸟类、鱼类等动物类别下载图片。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

1.数据来源：

可针对自己的模型需要在imagenet官网上下载所需类别对应的txt文件。

2.数据下载：

import os
from urllib.request import urlretrieve

def download():
    categories = ['bird', 'fish','invertebrate','mammal']  #需要下载图片所对应的txt文件
    for category in categories:
        #将下载到的图片保存在文件夹dataset中
        os.makedirs('./dataset1/%s' % category, exist_ok=True)
        #txt文件所在路径
        with open('./Animal/%s.txt' % category, 'r') as file:
            urls = file.readlines()
            n_urls = len(urls)
            for i, url in enumerate(urls):
                try:
                    urlretrieve(url.strip(), './Animal/%s/%s' % (category, url.strip().split('/')[-1]))
                    print('%s %i/%i' % (category, i, n_urls))
                except:
                    print('%s %i/%i' % (category, i, n_urls), 'no image')

if __name__ == '__main__':
    download()