批量压缩和解压
python3.6
#coding=utf-8
import os,os.path
import zipfile
def get_files(dirname):
for root, dirs, files in os.walk(dirname):
return root,files
def zip_dir(dirname,root,files,zipfilename):
filelist = []
for name in files:
filelist.append(os.path.join(root, name))
zf = zipfile.ZipFile(zipfilename, "w", zipfile.zlib.DEFLATED)
for tar in filelist:
arcname = tar[len(dirname):]
#print arcname
zf.write(tar,arcname)
zf.close()
def unzip_file(zipfilename, unziptodir):
if not os.path.exists(unziptodir): os.mkdir(unziptodir, 0o777)
zfobj = zipfile.ZipFile(zipfilename)
for name in zfobj.namelist():
name = name.replace('\\','/')
if name.endswith('/'):
os.mkdir(os.path.join(unziptodir, name))
else:
ext_filename = os.path.join(unziptodir, name)
ext_dir= os.path.dirname(ext_filename)
if not os.path.exists(ext_dir) : os.mkdir(ext_dir,0o777)
outfile = open(ext_filename, 'wb')
outfile.write(zfobj.read(name))
outfile.close()
if __name__ == '__main__':
dirname = r'E:/lsl/imageSpider/imageSpider/images'
root,_ = get_files(dirname)
for i in range(1,31128,500): #31128
print(i)
files=[]
k=i+499 if i+499<31128 else 31128
for j in range(i,i+500):
if j > 31128:
break
files.append(r'__ ('+str(j)+r').jpg')
#print(files)
zip_dir(dirname,root,files,r'd:/images/images'+str(i)+"-"+str(k)+r'.zip')
#unzip_file(r'E:/zip1-500.zip',r'E:/zip1-500')
文件夹中图片有30000多张,一次压缩还是很大。所以先统一命名图片,然后搞500张压一个包。
图片命名如下:

图片分享
90G的3W张图片,高清大图,可用于图片识别,分类,聚类等科学研究。


百度云链接:https://pan.baidu.com/s/1lsyySsbLlBpOImZiJhITlw
提取码:zua5
本文介绍了一种使用Python实现的批量图片压缩与解压缩方法,通过将大量图片(如30000张)分批压缩为ZIP文件,有效减少了存储空间需求。文章详细展示了如何利用Python的zipfile模块进行文件操作,包括创建压缩文件和从压缩文件中解压文件。
1350

被折叠的 条评论
为什么被折叠?



