高效的将两个文件夹中多余的文件删除

最新推荐文章于 2024-11-14 13:17:27 发布

原创

最新推荐文章于 2024-11-14 13:17:27 发布 · 805 阅读

9 ·

CC 4.0 BY-SA版权

文章标签：

#python #算法

文章介绍了一种更高效的方法来删除两个文件夹中重复的图像，通过复制文件并修改后缀，然后对比两个文件夹中的文件名差异，最后批量删除多余文件。使用Python实现，避免了双重遍历，降低了时间复杂度。

高效的将两个文件夹中多余的文件删除

解决方案

之前使用的是这个方法，但是图像太多，需要删除的有70W张，得删10多天。。

将两个文件夹中重复的图象删除

在这里插入图片描述

解决方案

先将image图像复制一份，然后改名为txt

import os

def change_file_extension(path, old_ext, new_ext):
    for root, dirs, files in os.walk(path):
        for file in files:
            if file.endswith(old_ext):
                old_file = os.path.join(root, file)
                new_file = os.path.splitext(old_file)[