xargs命令

本文介绍了如何利用find、xargs和sed、awk工具高效地查找、筛选和批量修改文件,展示了它们在处理大量文件时的优势,以及命令行参数与标准输入的区别。

如果需要查找当前目录下的所有 txt 文件,使用如下命令:

现在要通过 ls -l 命令查看所有这些 txt 文件的信息,那么我们肯定需要管道把 find 命令的结果传给 ls -l 命令;然而,很遗憾,ls 命令不能接受标准输入,因此不能通过管道直接连接 findls 命令,因此下面的命令是错误的:

$ # ls 不接受标准输入,因此这个命令是错误的
$ find . -name '*.txt' | ls -l

那么怎么办呢?要是我们能find 的命令结果的每一行作为 ls 命令的参数,那不就完美了?xargs 命令的作用正好就是如此:

$ # xargs 把 find 命令的结果的第一行,当作 ls -l 命令的命令行参数
find . -name '*.txt' | xargs ls -l
-rw-rw-r-- 1 bleauchat bleauchat  4 8月  18 00:12 ./aaa.txt
-rw-rw-r-- 1 bleauchat bleauchat  5 8月  18 00:12 ./bbb.txt
-rw-rw-r-- 1 bleauchat bleauchat 18 6月  17  2021 ./c1/hello.txt
-rw-rw-r-- 1 bleauchat bleauchat 50 3月  16 16:19 ./c2/test.txt

其实 xargs 命令有一个 -t 参数,可以在输出结果前,输出要执行的命令:

$ xargs 命令的 -t 参数可以输出要执行的命令
find . -name '*.txt' | xargs -t ls -l
ls -l ./bbb.txt ./c2/test.txt ./c1/hello.txt ./aaa.txt 
-rw-rw-r-- 1 bleauchat bleauchat  4 8月  18 00:12 ./aaa.txt
-rw-rw-r-- 1 bleauchat bleauchat  5 8月  18 00:12 ./bbb.txt
-rw-rw-r-- 1 bleauchat bleauchat 18 6月  17  2021 ./c1/hello.txt
-rw-rw-r-- 1 bleauchat bleauchat 50 3月  16 16:19 ./c2/test.txt

可以看到,最终的执行命令是上面的第三行;

在BSD 手册中,关于 xargs 命令,有一段描述如下

The xargs reads space, tab, newline and end-of-file delimited strings from the standard input and executes command with the strings as arguments.

xargs的作用是接收管道符前面命令的输出进行处理后作为命令行参数传递给后续命令,而并不是作为标准输入传递给后续命令

以空白字符(空格,tab,换行符均算空白字符)分隔从管道接收的文本,并且将分隔后文本均作为参数 

最近在处理文件时,发现要对很多文件的某几处做相同的修改,这时可以想到用 sed 和 awk 去批量处理,但是单纯的用 sed 和 awk 需要指定文件的位置,在处理大量文件时非常不方便,而 find 和 xargs 可以轻松实现批量文件的处理,如下:

find -type f | xargs sed -i 's/vip/custom_vip/g'#将文件中的 vip 全部换为 custom_vip
 ls *.sh | xargs rm -rf 找出所有.sh类型的文件并且删除

首先在这里再次解释一下命令行参数和标准输入的区别:

  • 命令行参数
    命令行参数就是命令后面的参数
    例如rm hello.sh,rm是命令,hello.sh就是命令行参数
    例如cat a.txt, cat是命令,a.txt就是命令行参数
  • 标准输入
    管道符之前命令的输出结果(即打印在屏幕的文本)作为之后命令的标准输入

 举个例子:

cat a.txt | sort
这个命令是先查看a.txt文件然后对输出的内容进行排序,后面sort命令要处理的内容就是前面cat命令输出的内容,即cat命令的标准输出作为sort命令的标准输入,这个命令等价于sort a.txt

举个例子看一下 xargs 的作用:

 可以看到 xargs 将 ls *.txt 的输出作为 cat 的命令参数,上面的命令等价于 cat aaa.txt  bbb.txt

前面提到过,xargs 以空白字符(空格,tap,换行符均算空白字符)分隔从管道接收的文本,并且将分隔后文本均作为参数,来看下面例子:

 可以看到上面 加 xargs 和 不加的区别,不加的话 cat test.txt 的输出就作为 cat 的标准输入,而 加上 xargs 后输出就作为 cat 的命令行参数,由于 不存在 ccc.txt 这个文件,所以会报错!

所以再次强调,xargs的作用就是将管道输出的文本进行处理以后作为命令行参数传递给后续命令,假如xargs将前面命令分隔成100个字段,那么这100个字段都将作为命令行参数传递给后续命令

xargs常用选项

参数解释
-d指定分隔符
-p先打印即将执行的命令并询问是否执行
-n指定每次传输给后续命令的参数个数

 【-d】默认是以空白字符分隔,可以指定字符分隔

cat test.sh | xargs -d ':' cat#以冒号作为分隔符

【-p】执行前先打印要执行的命令并询问,需要输入y继续执行

 【-n】每一次输入指定数量的参数给后续命令

cat x_test.sh | xargs -n 3 cat
等价于执行:
cat a.txt b.txt c.txt
cat d.txt e.txt file1
cat file2

### 三级标题:xargs命令的作用及使用方法 在 Linux 系统中,`xargs` 命令是一个功能强大的工具,用于将标准输入的数据转换为命令行参数,并传递给指定的命令进行处理。这种机制特别适用于需要批量处理文件或执行多参数操作的场景,同时支持并发处理以提高效率[^1]。 #### 基本语法 ```bash command | xargs [选项] [命令] ``` #### 常用选项和参数 - `-n, --max-args=N`:指定每次传递给命令的最大参数数量。例如,以下命令将 `echo` 输出的参数分组传递给 `echo` 命令,每组最多包含一个参数: ```bash echo "q w e r t y" | xargs -n1 ``` - `-L, --max-lines=N`:指定每次读取的输入行数作为参数传递给命令。例如,以下命令将输入的每两行作为一组传递给 `run.sh` 脚本: ```bash cat 1.txt | xargs -L 2 ./run.sh ``` 该命令可以实现更复杂的组合逻辑,例如在处理包含多行数据的文件时,将数据分组处理[^4]。 - `-P, --max-procs=N`:指定最大并发进程数。例如,以下命令将 `find` 命令查找的文件列表并发传递给 `grep` 命令进行处理: ```bash find -iname "*.h" | xargs -P 4 grep "RPMSG_BUFFER_SIZE" ``` 这种方式可以显著提高处理大量文件时的效率。 - `-0, --null`:使用空字符作为参数分隔符,通常与 `find -print0` 配合使用,以处理包含空格或特殊字符的文件名。例如: ```bash find /path/to/dir -name "*.txt" -print0 | xargs -0 rm -f ``` 该选项确保文件名中的空格不会导致错误。 #### 基本使用 ##### 结合find与grep `xargs` 命令可以结合 `find` 和 `grep` 实现高效的文件内容搜索。例如,以下命令将在当前目录及其子目录中查找所有 `.h` 文件,并在其中搜索 `RPMSG_BUFFER_SIZE` 字符串: ```bash find -iname "*.h" | xargs grep "RPMSG_BUFFER_SIZE" ``` 此命令利用 `find` 查找文件,并通过 `xargs` 将文件列表传递给 `grep` 进行内容匹配[^3]。 ##### 批量处理文件 `xargs` 可用于批量处理文件,例如删除所有匹配的文件: ```bash find /path/to/dir -name "*.log" | xargs rm -f ``` 此命令将 `find` 命令输出的文件列表传递给 `rm` 命令进行删除操作。 ##### 多行输入处理 `xargs` 支持对多行输入进行分组处理。例如,以下命令将 `1.txt` 文件中的内容按每两行一组传递给 `run.sh` 脚本: ```bash cat 1.txt | xargs -L 2 ./run.sh ``` 此命令可以用于处理需要分批次执行的任务,例如批量执行脚本或命令。 #### 注意事项 - `xargs` 默认会将输入按空格或换行符分割为参数列表,若输入中包含特殊字符(如空格、引号等),建议使用 `-0` 选项配合 `find -print0` 使用。 - 在脚本中使用 `xargs` 时,需注意其行为可能会受到输入格式和命令执行方式的影响。 - 若未指定命令,`xargs` 默认使用 `echo` 命令输出参数列表。
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值