Ubuntu下删除两个文件夹下相同文件名且相同内容的文件V1.1（分色排版）

最新推荐文章于 2025-01-17 14:02:31 发布
最新推荐文章于 2025-01-17 14:02:31 发布
阅读量715 收藏 1
点赞数 1
分类专栏： 全志
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.youkuaiyun.com/wb4916/article/details/72771064
版权
本文介绍了一种在Ubuntu系统中删除两个文件夹内相同名称且内容一致文件的方法。首先使用diff命令找出这些文件，然后利用awk和xargs进行删除操作，并清理空文件夹。

摘要生成于 C知道 ，由 DeepSeek-R1 满血版支持， 前往体验 >

Ubuntu下删除两个文件夹下相同文件名且相同内容的文件

2017/5/2 17:09

 

 

缘起：一直在维护android的BSP，有时候发现另外一个来源的BSP有你所需要的一些功能。

因此需要使用一个工具，比对两份代码，将两份BSP里面的相同文件名（内容也完全相同）的文件删除掉。

 

 

1、列出两个文件夹dir1、dir2下相同的文件：

（英文版本ubuntu）

diff -rs dir1 dir2 | grep 'identical$'  

 

（中文版本ubuntu）

rootroot@cm-System-Product-Name:/home/wwt$ diff -rs prk_tina_bak/ fds_tinav2.1/ | grep "相同$" > 3.txt

 

 

比较之前预先删除.git和.repo文件夹。

rootroot@cm-System-Product-Name:/home/wwt/fds_tinav2.1$ rm .repo/ -rf

rootroot@cm-System-Product-Name:/home/wwt/fds_tinav2.1$ cd ../prk_tina_bak/

rootroot@cm-System-Product-Name:/home/wwt/prk_tina_bak$ rm .repo/ -rf

rootroot@cm-System-Product-Name:/home/wwt/prk_tina_bak$

 

 

rootroot@cm-System-Product-Name:/home/wwt$ cd prk_tina_bak/

rootroot@cm-System-Product-Name:/home/wwt/prk_tina_bak$

rootroot@cm-System-Product-Name:/home/wwt/prk_tina_bak$ find . -name .git

./target/.git

./dl/.git

./scripts/.git

./toolchain/.git

./lichee/brandy/.git

./lichee/linux-3.4/.git

./.repo/manifests/.git

./.repo/repo/.git

./tools/.git

./package/.git

./config/.git

./prebuilt/.git

./docs/.git

./build/.git

rootroot@cm-System-Product-Name:/home/wwt/prk_tina_bak$ find . -name .git | xargs rm -rf

rootroot@cm-System-Product-Name:/home/wwt/prk_tina_bak$ find . -name .git

rootroot@cm-System-Product-Name:/home/wwt/prk_tina_bak$ cd ../fds_tinav2.1/

rootroot@cm-System-Product-Name:/home/wwt/fds_tinav2.1$ find . -name .git

./target/.git

./dl/.git

./scripts/.git

./toolchain/.git

./lichee/brandy/.git

./lichee/linux-3.4/.git

./.repo/manifests/.git

./.repo/repo/.git

./tools/.git

./package/.git

./config/.git

./prebuilt/.git

./docs/.git

./build/.git

rootroot@cm-System-Product-Name:/home/wwt/fds_tinav2.1$ find . -name .git | xargs rm -rf

rootroot@cm-System-Product-Name:/home/wwt/fds_tinav2.1$ find . -name .git

rootroot@cm-System-Product-Name:/home/wwt/fds_tinav2.1$

 

 

 

 

正式使用diff比对，将不同的部分存储到文件：3.txt

rootroot@cm-System-Product-Name:/home/wwt/fds_tinav2.1$

rootroot@cm-System-Product-Name:/home/wwt/fds_tinav2.1$ cd ..

rootroot@cm-System-Product-Name:/home/wwt$ diff -rs prk_tina_bak/ fds_tinav2.1/ | grep "相同$" > 3.txt

diff: prk_tina_bak/prebuilt/gcc/linux-x86/aarch64/toolchain-sunxi/toolchain/aarch64-openwrt-linux/lib/lib: 符号连接的层数过多

diff: fds_tinav2.1/prebuilt/gcc/linux-x86/aarch64/toolchain-sunxi/toolchain/aarch64-openwrt-linux/lib/lib: 符号连接的层数过多

diff: prk_tina_bak/prebuilt/gcc/linux-x86/aarch64/toolchain-sunxi/toolchain/aarch64-openwrt-linux/lib/lib64: recursive directory loop

diff: prk_tina_bak/prebuilt/gcc/linux-x86/aarch64/toolchain-sunxi/toolchain/aarch64-openwrt-linux/lib64/lib: 符号连接的层数过多

diff: fds_tinav2.1/prebuilt/gcc/linux-x86/aarch64/toolchain-sunxi/toolchain/aarch64-openwrt-linux/lib64/lib: 符号连接的层数过多

diff: prk_tina_bak/prebuilt/gcc/linux-x86/aarch64/toolchain-sunxi/toolchain/aarch64-openwrt-linux/lib64/lib64: recursive directory loop

diff: prk_tina_bak/prebuilt/gcc/linux-x86/aarch64/toolchain-sunxi/toolchain/aarch64-openwrt-linux-musl/lib/lib: 符号连接的层数过多

diff: fds_tinav2.1/prebuilt/gcc/linux-x86/aarch64/toolchain-sunxi/toolchain/aarch64-openwrt-linux-musl/lib/lib: 符号连接的层数过多

diff: prk_tina_bak/prebuilt/gcc/linux-x86/aarch64/toolchain-sunxi/toolchain/aarch64-openwrt-linux-musl/lib/lib64: recursive directory loop

diff: prk_tina_bak/prebuilt/gcc/linux-x86/aarch64/toolchain-sunxi/toolchain/aarch64-openwrt-linux-musl/lib64/lib: 符号连接的层数过多

diff: fds_tinav2.1/prebuilt/gcc/linux-x86/aarch64/toolchain-sunxi/toolchain/aarch64-openwrt-linux-musl/lib64/lib: 符号连接的层数过多

diff: prk_tina_bak/prebuilt/gcc/linux-x86/aarch64/toolchain-sunxi/toolchain/aarch64-openwrt-linux-musl/lib64/lib64: recursive directory loop

diff: prk_tina_bak/prebuilt/gcc/linux-x86/aarch64/toolchain-sunxi/toolchain/lib/lib: 符号连接的层数过多

diff: fds_tinav2.1/prebuilt/gcc/linux-x86/aarch64/toolchain-sunxi/toolchain/lib/lib: 符号连接的层数过多

diff: prk_tina_bak/prebuilt/gcc/linux-x86/aarch64/toolchain-sunxi/toolchain/lib/lib64: recursive directory loop

diff: prk_tina_bak/prebuilt/gcc/linux-x86/aarch64/toolchain-sunxi/toolchain/lib32/lib: 符号连接的层数过多

diff: fds_tinav2.1/prebuilt/gcc/linux-x86/aarch64/toolchain-sunxi/toolchain/lib32/lib: 符号连接的层数过多

diff: prk_tina_bak/prebuilt/gcc/linux-x86/aarch64/toolchain-sunxi/toolchain/lib32/lib64: recursive directory loop

diff: prk_tina_bak/prebuilt/gcc/linux-x86/aarch64/toolchain-sunxi/toolchain/lib64/lib: 符号连接的层数过多

diff: fds_tinav2.1/prebuilt/gcc/linux-x86/aarch64/toolchain-sunxi/toolchain/lib64/lib: 符号连接的层数过多

diff: prk_tina_bak/prebuilt/gcc/linux-x86/aarch64/toolchain-sunxi/toolchain/lib64/lib64: recursive directory loop

diff: prk_tina_bak/prebuilt/gcc/linux-x86/arm/toolchain-sunxi/toolchain/arm-openwrt-linux/lib/lib: 符号连接的层数过多

diff: fds_tinav2.1/prebuilt/gcc/linux-x86/arm/toolchain-sunxi/toolchain/arm-openwrt-linux/lib/lib: 符号连接的层数过多

diff: prk_tina_bak/prebuilt/gcc/linux-x86/arm/toolchain-sunxi/toolchain/arm-openwrt-linux-muslgnueabi/lib/lib: 符号连接的层数过多

diff: fds_tinav2.1/prebuilt/gcc/linux-x86/arm/toolchain-sunxi/toolchain/arm-openwrt-linux-muslgnueabi/lib/lib: 符号连接的层数过多

diff: prk_tina_bak/prebuilt/gcc/linux-x86/arm/toolchain-sunxi/toolchain/lib/lib: 符号连接的层数过多

diff: fds_tinav2.1/prebuilt/gcc/linux-x86/arm/toolchain-sunxi/toolchain/lib/lib: 符号连接的层数过多

diff: prk_tina_bak/prebuilt/gcc/linux-x86/arm/toolchain-sunxi/toolchain/lib32/lib: 符号连接的层数过多

diff: fds_tinav2.1/prebuilt/gcc/linux-x86/arm/toolchain-sunxi/toolchain/lib32/lib: 符号连接的层数过多

diff: prk_tina_bak/prebuilt/gcc/linux-x86/arm/toolchain-sunxi/toolchain/lib64/lib: 符号连接的层数过多

diff: fds_tinav2.1/prebuilt/gcc/linux-x86/arm/toolchain-sunxi/toolchain/lib64/lib: 符号连接的层数过多

rootroot@cm-System-Product-Name:/home/wwt$

 

 

 

 

2、删除通过diff比对找到的相同的文件（同名同内容）：

awk '{print $2}' 3.txt | xargs rm -rf

awk '{print $4}' 3.txt | xargs rm -rf

 

 

参考资料：

http://bbs.youkuaiyun.com/topics/320031351

awk如何删除一个文件？

 

awk -F, '{print $2}' test.txt | xargs rm -rf

 

 

 

 

3、你会发现有很多空的文件夹/目录，需要把它们找出来删除。

由于有些空文件夹里面只有空文件夹，当你删除最底层的空文件夹，上层的文件夹也是空的。

因此需要多次执行！

rootroot@cm-System-Product-Name:/home/wwt$ cd prk_tina_bak/

rootroot@cm-System-Product-Name:/home/wwt/prk_tina_bak$ find . -name "*" -type d -empty | xargs rm -rf

rootroot@cm-System-Product-Name:/home/wwt/prk_tina_bak$ find . -name "*" -type d -empty | xargs rm -rf

rootroot@cm-System-Product-Name:/home/wwt/prk_tina_bak$ find . -name "*" -type d -empty | xargs rm -rf

rootroot@cm-System-Product-Name:/home/wwt/prk_tina_bak$ find . -name "*" -type d -empty | xargs rm -rf

rootroot@cm-System-Product-Name:/home/wwt/prk_tina_bak$ find . -name "*" -type d -empty | xargs rm -rf

rootroot@cm-System-Product-Name:/home/wwt/prk_tina_bak$ find . -name "*" -type d -empty | xargs rm -rf

rootroot@cm-System-Product-Name:/home/wwt/prk_tina_bak$ find . -name "*" -type d -empty | xargs rm -rf

rootroot@cm-System-Product-Name:/home/wwt/prk_tina_bak$ find . -name "*" -type d -empty | xargs rm -rf

rootroot@cm-System-Product-Name:/home/wwt/prk_tina_bak$ find . -name "*" -type d -empty | xargs rm -rf

rootroot@cm-System-Product-Name:/home/wwt/prk_tina_bak$ find . -name "*" -type d -empty | xargs rm -rf

rootroot@cm-System-Product-Name:/home/wwt/prk_tina_bak$ find . -name "*" -type d -empty | xargs rm -rf

rootroot@cm-System-Product-Name:/home/wwt/prk_tina_bak$ find . -name "*" -type d -empty | xargs rm -rf

rootroot@cm-System-Product-Name:/home/wwt/prk_tina_bak$ find . -name "*" -type d -empty

rootroot@cm-System-Product-Name:/home/wwt/prk_tina_bak$

 

 

rootroot@cm-System-Product-Name:/home/wwt/prk_tina_bak$ cd ../fds_tinav2.1/

rootroot@cm-System-Product-Name:/home/wwt/fds_tinav2.1$

rootroot@cm-System-Product-Name:/home/wwt/fds_tinav2.1$ find . -name "*" -type d -empty | xargs rm -rf

rootroot@cm-System-Product-Name:/home/wwt/fds_tinav2.1$ find . -name "*" -type d -empty | xargs rm -rf

rootroot@cm-System-Product-Name:/home/wwt/fds_tinav2.1$ find . -name "*" -type d -empty | xargs rm -rf

rootroot@cm-System-Product-Name:/home/wwt/fds_tinav2.1$ find . -name "*" -type d -empty | xargs rm -rf

rootroot@cm-System-Product-Name:/home/wwt/fds_tinav2.1$ find . -name "*" -type d -empty | xargs rm -rf

rootroot@cm-System-Product-Name:/home/wwt/fds_tinav2.1$ find . -name "*" -type d -empty | xargs rm -rf

rootroot@cm-System-Product-Name:/home/wwt/fds_tinav2.1$ find . -name "*" -type d -empty | xargs rm -rf

rootroot@cm-System-Product-Name:/home/wwt/fds_tinav2.1$ find . -name "*" -type d -empty | xargs rm -rf

rootroot@cm-System-Product-Name:/home/wwt/fds_tinav2.1$ find . -name "*" -type d -empty | xargs rm -rf

rootroot@cm-System-Product-Name:/home/wwt/fds_tinav2.1$ find . -name "*" -type d -empty | xargs rm -rf

rootroot@cm-System-Product-Name:/home/wwt/fds_tinav2.1$ find . -name "*" -type d -empty | xargs rm -rf

rootroot@cm-System-Product-Name:/home/wwt/fds_tinav2.1$ find . -name "*" -type d -empty

rootroot@cm-System-Product-Name:/home/wwt/fds_tinav2.1$

 

 

参考资料：

http://www.111cn.net/sys/linux/46433.htm

linux中find批量删除空文件及空文件夹脚本

 

查询出所有的空文件夹

find -type d -empty

 

 

http://blog.youkuaiyun.com/u010555688/article/details/51280783

Ubuntu 删除两个文件夹下相同文件名的文件

参考：http://bbs.chinaunix.net/forum.PHP?mod=viewthread&tid=1851432&page=1

 

详解Ubuntu下配置samba实现文件夹共享
09-15
在Linux系统中，Ubuntu是一个广泛使用的桌面和服务器操作系统。为了实现与Windows系统之间的文件共享，我们需要利用Samba服务。Samba是一个开源软件，它允许Linux系统兼容Microsoft的SMB（Server Message Block）...
Ubuntu中批量清除同一个文件夹下的后缀相同文件
qq_45138078的博客
11-21 1160
在Ubuntu中批量清除同一个文件夹下的后缀相同的文件。
Ubuntu 删除两个文件夹下相同文件名的文件
u010555688的专栏
04-29 2667
1、列出两个文件夹dir1、dir2下相同的文件： diff -rs dir1 dir2|grep 'identical$' 2、删除两个文件夹dir1、dir2下相同文件名的文件： for i in `awk 'a[$1]++' <(dir -l dir1 dir2 |awk '{print $NF}')` do rm -r dir1/$i rm -r dir2/$i done 3、另一
Ubuntu 删除两个文件夹下相同文件名的文件（内容也完全相同）
南岭笑笑生之家
08-29 2185
http://blog.youkuaiyun.com/u010555688/article/details/51280783 Ubuntu 删除两个文件夹下相同文件名的文件 参考：http://bbs.chinaunix.net/forum.PHP?mod=viewthread&tid=1851432&page=1 缘起：一直在维护android的BSP，有时候发现另外一个来源的BSP有
ubuntu删去两个文件夹中的同名文件
qq_37724465的博客
02-07 411
for i in `awk 'a[$1]++' <(dir -l dir1 dir2 |awk '{print $NF}')` do rm -r dir1/$i rm -r dir2/$i done 为了友好初学者简单介绍一下怎么执行上述代码： 1.新建一个脚本文件 如 vi jiaoben.sh 2.粘贴上述代码，将dir1、dir2转化为所需路径 3.chmod -x jiaoben...
【Ubuntu】Ubuntu删除文件夹和文件的命令
热门推荐
wzk4869的博客
04-30 3万+
【Ubuntu】Ubuntu删除文件夹和文件的命令
Ubuntu samba下配置共享文件夹的方法
09-15
### Ubuntu Samba 下配置共享文件夹的方法 #### 一、前言 Samba 是一个用于在 Linux 和 Windows 系统之间实现文件共享的开源软件包。它提供了 Linux 系统与 Windows 系统之间的文件共享服务，使得 Linux 和 ...
Linux(ubuntu)下实现增加/删除文件权限
01-20
ubuntu系统中，对于不同用户及不同用户组中用户对文件的操作权限都不相同，通过控制台我们可以快速的对文件权限进行操作。 对于修改权限可以使用两种方案来更改其权限，下面认识一下文件系统权限的组成： 文件权限...
ubuntu创建、删除文件及文件夹，强制清空回收站方法
08-03
* `rm` 命令用于删除一个文件或多个文件，例如 `rm 文件名 文件名`，删除名为 `文件名` 的文件。 * `rm -rf` 命令用于删除一个非空目录，例如 `rm -rf 非空目录名`，删除名为 `非空目录名` 的非空目录。 * `rmdir` ...
Erlang MQTT消息服务器 v1.1 beta for Ubuntu
12-06
Erlang MQTT消息服务器v1.1 beta for Ubuntu是一个基于Erlang编程语言构建的高性能、高可用性的MQTT（Message Queuing Telemetry Transport）消息代理，专为Ubuntu操作系统设计。MQTT是一种轻量级的发布/订阅消息...
快速查询并快速删除重复文件的小工具（亲测非常可靠实用）
04-20
快速查询并快速删除重复文件的小工具（亲测非常可靠实用），程序很小，用了十几年了。
Linux常用命令和操作
sfr2017的博客
11-23 1000
感谢下面提及的各类URL参考文献的作者！ nproc 是操作系统级别对每个用户创建的进程数的限制,在Linux下运行多线程时,每个线程的实现其实是一个轻量级的进程,对应的术语是:light weight process(LWP)。 lspci 是一个用来显示系统中所有PCI总线设备或连接到该总线上的所有设备的工具。 lspci -vv 使得 lspci 以过冗余模...
linux搜索一个字符串,如何在整个系统(Linux)中搜索特定字符串？
weixin_29577885的博客
04-28 146
我需要找到这个字符串：7z a -p我试过了：grep -iR“7z a -p”/但它似乎在一段时间后挂起,有很多：grep: /sys/class/vc/vcs5/power/autosuspend_delay_ms: Input/output errorgrep: warning: /sys/class/vc/vcsa5/subsystem: recursive directory loopg...
ubuntu磁盘空间清理
最新发布
xie__jin__cheng的博客
01-17 2693
ubuntu磁盘空间清理
Ubuntu删除两个文件夹下同名同内容的文件V1.2
南岭笑笑生之家
07-13 1171
http://blog.youkuaiyun.com/u010555688/article/details/51280783 Ubuntu删除两个文件夹下同名同内容的文件 参考：http://bbs.chinaunix.net/forum.PHP?mod=viewthread&tid=1851432&page=1 缘起：一直在维护android的BSP，有时候发现另外一个来源的BSP有你
Python处理文件——删除两个文件夹中的同名文件
Moran_0630的博客
11-30 3454
目录 问题描述 处理思路 需要接收的参数 完整代码 写在最后 问题描述 比较两个文件夹内的文件名，把相同文件名的文件删除 处理思路 把两个路径中的文件分别放入array 循环路径A，如果包含B中的文件名则移去 运用到的库 import os import shutil 需要接收的参数 aPath——A路径 bPath——B路径 完整代码 def checkFileName(aPath, bPath): bList = os.listdir(bPath) .
查找并删除重复文件
至虛極，守靜篤
03-23 761
Shell 脚本删除重复文件。
删除两个文件夹中同名文件
weixin_43091087的博客
09-18 849
import os def file1(dirpath): for root, dirs, file1 in os.walk(dirpath): return file1 def file2(dirpath): for root, dirs, file2 in os.walk(dirpath): return file2 file1=file1(r’D:\cut_43\cut_D43_CO...
如何用Python寻找重复文件并删除
weixin_33671935的博客
03-30 611
在实际生活中，经常会有文件重复的困扰，即同一个文件可能既在A目录中，又在B目录中，更可恶的是，即便是同一个文件，文件名可能还不一样。在文件较少的情况下，该类情况还比较容易处理，最不济就是one by one的人工比较——即便如此，也很难保证你的眼神足够犀利。倘若文件很多，这岂不是个impossible mission？最近在看《Python UNIX和Linux系统管理指南》，里面就有有关“数据比...
ubuntu18.04，比较两个文件夹下图片名称，打印另一个文件夹没有的
05-27
你可以使用以下命令来比较两个文件夹下的图片文件名，并打印出另一个文件夹中没有的图片文件名： ``` diff <(ls folder1/*.jpg | sort) <(ls folder2/*.jpg | sort) | grep '<' ``` 其中，`folder1` 和 `folder2` 分别指代你要比较的两个文件夹的路径。这个命令通过 `ls` 命令列出文件夹下所有的 `.jpg` 格式的图片文件，并通过 `sort` 命令将它们按字母顺序排序。然后，通过 `diff` 命令比较两个文件夹下的图片文件名，并将结果中只出现在第一个文件夹中的文件名筛选出来，最后通过 `grep` 命令打印出来。 请注意，这个命令只会比较文件名是否相同，不会比较文件内容。如果你需要比较文件内容，请使用 `diff` 命令的其他选项。
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值