用Python寻找相同文件

最新推荐文章于 2025-05-13 21:30:54 发布

原创最新推荐文章于 2025-05-13 21:30:54 发布 · 942 阅读

1 ·

CC 4.0 BY-SA版权

文章标签：

#Python #图片 #脚本 #os

Python 专栏收录该内容

2 篇文章

订阅专栏

本文介绍了一个使用Python编写的图片查重脚本，通过计算图片的MD5值来判断是否重复，并提供了完整的代码示例。

我在采集图片样本的时候，发现很多图片都是重复的，所以就想着写一个查重的Python脚本。

import os
import hashlib
def checkmd5(path):
    f=open(path,'rb')
    content=f.read()
    M=hashlib.md5()
    M.update(content)
    return M.hexdigest()
folder=input("请输入文件夹名字：")
md5Lib={}
md5toName={}
for root,dirs,files in os.walk(folder):
    for file in files:
        filename=os.path.join(root,file)
        tempMD5 = checkmd5(filename)
        if not tempMD5 in md5Lib.values():
            md5toName[tempMD5]=filename
            md5Lib[filename]=tempMD5
        else:
            print(filename,'和',md5toName[tempMD5],'重复了')