linux去除重复行，与find命令正则查找文件名

最新推荐文章于 2024-07-22 21:22:07 发布
原创 最新推荐文章于 2024-07-22 21:22:07 发布 · 1.1k 阅读 · 2 ·
CC 4.0 BY-SA版权
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
文章标签：

#linux

去除重复

cat a.txt | sort | uniq

cat 输出
sort 排序
uniq 去除重复

find命令正则查找:

find ./ -regex '.*[0-9].*'
Shell程序设计(二) 内置命令、find、grep与正则表达式
ZY-JIMMY
05-08 1771
Shell内置命令 、find命令 、grep命令 、正则表达式
目录替换正则
*
11-05 438
# 【终极正则】：找 汉字/字母开始 + 除汉字、字母、数字外所有字符 # + 1-3位数字结尾 ([\u4e00-\u9fa5a-zA-Z])[^\u4e00-\u9fa5a-zA-Z0-9]*(\d{1,3})$ # 替换为：汉字/字母+tab+1-3位数字 \1\t\2 # 找.....12之类页码：以.开头，1-3位数字结尾的 \.+(\d{1,3})$ # 替换为tab+页码 \t\1 # 找：所有空行 ^\n #找：行首 + 空（0或多个）+ 数字.数字 + 空/
linux目录格的正则表达式,Linux的 - 要检查可能重复目录（也许正则表达式需要）...
weixin_29574211的博客
05-01 146
跟进：我做了我需要通过编码下面的Perl脚本使用。这是我第一次使用Perl脚本(并且我必须学习Perl来编写它 - 所以不要对我很难:)#!/usr/bin/perl# README## Checks a folder for Albums that are similar# eg :# Arist-Back_In_Black-(Remastered)-2001-XXX# Artist-Back_...
Linux使用正则表达式拷贝文件,拷贝目录 并根据正则表达式排除指定目录/文件...
weixin_39884738的博客
05-13 1208
# https://zohead.com/archives/linux-copy-directory-ignore-files/# find 的 -regextype 参数指定正则表达式类型，posix-egrep 为 egrep 用的扩展正则表达式，-mindepth 使 find 的输出中不包括目录本身，-regex 参数指定过滤的文件的正则表达式，-regex 前面的感叹号表示跳过，'./(...
Linux 文件去重
weixin_30361753的博客
08-02 381
背景： 大量图片，但个图片只是名字不一样，内容一样，需要去重 date;find /home/admin/image -name *.jpeg | xargs md5sum|sort >allfiles;cat allfiles |uniq -w 32 > uniqfiles;comm allfiles uniqfiles -2 |cut -c 35-|tr '\n' '...
Linux下过滤文件名去重,Linux下文件排序去重取交集差集
weixin_34863212的博客
04-28 484
获取交集cat a.txt b.txt | sort | uniq -d>./comm.txtcomm -12 b.txt|uniq )>./comm.txt共同的交集获取差cat a.txt b.txt | sort | uniq -u>./diff.txt写入a.txt和b.txt所有 不同的元素 相同元素不写入注意顺序很重要！$grep-F-v-fa.t...
Linux（Linux命令）和Window（Powershell）的查找命令
最新发布
2401_84939870的博客
07-22 1631
今天突然想写一点别的哈哈哈，这个可以不看
linux命令（查找筛选工具）1
08-08
本文将详细介绍几个常用的命令，包括`find`、`grep`、`sed`以及`awk`，它们都是Linux环境中强大的文本处理和文件查找工具。 首先，`find`命令是用于查找文件的，可以根据名称、权限、类型、时间戳和大小等多种条件...
Linux（linux命令）和Window（powershell）的查找命令
https://blog.youkuaiyun.com/qFAFAF
07-22 1291
这些策略是 PowerShell 安全策略的一部分，用于确定是否可以加载配置文件（包括 PowerShell 配置文件）和运行脚本，以及哪些脚本（如果有）在运行之前必须进行数字签名。如果你需要基于更复杂的条件进行筛选，或者你想要对对象进行进一步的处理（而不仅仅是基于名称的筛选），那么使用。你需要更改执行策略来允许运行脚本。：这是PowerShell中的管道符号，它允许你将一个命令的输出作为另一个命令的输入。执行策略：默认情况下，PowerShell可能不允许运行未签名的脚本，一打开就会把你的文件给关闭。
Linux shell利用sed如何批量更改文件名详解
09-15
对于更复杂的需求，例如需要在多层目录中查找并修改文件名，可以使用 `find` 命令。 **示例**：将所有大于1MB，且后缀为 `txt` 或 `jpg` 的文件，由形如 `book_20170101.txt`、`image_20170101.jpg` 的文件改名为 `...
linux怎么对文件去重,linux文件合并、去重、拆分
weixin_29517217的博客
05-09 1804
一、两个文件的交集、并集(前提条件：每个文件中不得有重复行)1. 取出两个文件的并集(重复的行只保留一份)cat file1 file2 | sort | uniq > file32. 取出两个文件的交集(只留下同时存在于两个文件中的文件)cat file1 file2 | sort | uniq -d > file33. 删除交集，留下其他的行cat file1 file2 | so...
Linux命令：查找 排序 去重
自然醒的博客
04-27 1627
目录 全局性搜索文件 find 1、基本例子 2、按条件查找 1）按照文件名查找 2）按照文件类型查找 -type 3）按照时间查找 4）按照用户和组查找 5）按照权限查找 -perm 6）按照文件大小查找 -size 3、动作 排序：sort uniq去重，唯一 扩展小命令：which alias which 用来查找命令的绝对路径 命令的别名：alias 全局性搜索文件 find 工作模...
Linux常用命令之获取查找重定向去重
许高鹏的博客
01-07 482
当前目录中有多个文件,查找其中所有以 xm 结尾的文件命令 find -name _*.xm Shell 获取某行第几个字符怎么做？ $ echo ${test:n:m} shell 如果获得本文第 10 行数据？ sed –n ‘10p’ 文件名称 一个文本文件名为 sample.txt，使用 shell 命令将不包含 abc 的行的数据重定向到 sample1.txt cp sampl...
find及其他命令
weixin_30357231的博客
08-05 178
Find命令 Find / -type f :f为普通文件 Find / -name *.txt ：查找.txt结尾的 Find / -size +30M :找根目录下大于30M的文件 Find / -size +10M -size -30M :找大于10M小于30M的 Grep –rn jsf ./ :查找./目录下的所有带jsf的 查找大于20M 类型为普通文件的...
在Linux中查找和删除重复文件的4种方法
ken2232的博客
03-30 2533
在Linux中查找和删除重复文件的4种方法
Linux命令之find
zhengjihao的博客
09-16 619
Linux下find命令在目录结构中搜索文件，并执行指定的操作。Linux下find命令提供了相当多的查找条件，功能强大。即使系统中含有网络文件系统(NFS)，find命令在该文件系统中同样有效，只要你有相应权限。命令格式： find pathname -option [-print, -exec ,-ok …]参数详解： pathname ：查找的路径，. 表示当前路径，/表示根目录, ~表示
linux正则搜索文件,Linux 命令（一） find&grep文件查找命令
weixin_39837607的博客
04-29 919
查找命令：find & grep区别：(1) find命令是根据文件名，文件大小，所有者，所属组，是否为空，访问时间，修改时间等。(2) grep是根据文件的每一行按照给定的模式(patter)进行匹配查找。一.find命令基本格式：find path[options]1.按照文件名查找(1)find /etc -name httpd.conf　　#在/etc目录下文件httpd.co...
linux find用正则表达式
热门推荐
bodybo的专栏
12-12 1万+
find -name只能支持普通的通配符如*等，简单的-regex也不能支持扩展的正则表达式，要支持扩展的正则表达式，可用如下命令。 如要找出当前目录下字母开头至少4个数字结尾的txt文件，可以如下这么写： find ./ -regextype 'posix-egrep' -regex '\./[a-z]+[0-9]{4，}\.txt$' 注意这里find的结果是以‘./’开头的，但似乎不...
Linux下查找文件（find, grep）
u011536527的博客
01-03 1万+
Linux 中，一切皆文件，如何查找文件
Linux文件查找与管理基础命令详解
"033-RHCE 认证用户基础.ppt 是一份面向 Linux 初学者的系统性教学资料，重点围绕 RHCE（Red Hat Certified Engineer）认证考试中涉及的基础用户操作技能展开，尤其聚焦于文件查找与文件管理的核心命令。该文档由...
评论
成就一亿技术人!
拼手气红包6.0元
还能输入1000个字符
 
红包 添加红包
表情包 插入表情
表情包 代码片
 条评论被折叠 查看
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值