xargs命令详解

  

基础命令学习目录

 

原文连接：https://www.cnblogs.com/wangqiguo/p/6464234.html

为何要用xargs，问题的来源

在工做中常常会接触到xargs命令，特别是在别人写的脚本里面也常常会遇到，可是却很容易与管道搞混淆，本篇会详细讲解到底什么是xargs命令，为何要用xargs命令以及与管道的区别。为何要用xargs呢，咱们知道，linux命令能够从两个地方读取要处理的内容，一个是经过命令行参数，一个是标准输入。例如cat、grep就是这样的命令，举个例子：

?

1	echo 'main' | cat test .cpp

这种状况下cat会输出test.cpp的内容，而不是'main'字符串，若是test.cpp不存在则cat命令报告该文件不存在，并不会尝试从标准输入中读取。echo 'main' | 会经过管道将 echo 的标准输出(也就是字符串'main')导入到 cat 的标准输入，也就是说此时cat的标准输入中是有内容的，其内容就是字符串'main'可是上面的内容中cat不会从它的标准输入中读入要处理的内容。(注:标准输入是有一个缓冲区的，就像咱们在程序中使用scanf函数从标准输入中读取同样，其实是从标准输入的缓冲区中读取的)。其实基本上linux的命令中不少的命令的设计是先从命令行参数中获取参数，而后从标准输入中读取，反映在程序上，命令行参数是经过main函数 int main(int argc,char*argv[]) 的函数参数得到的，而标准输入则是经过标准输入函数例如C语言中的scanf读取到的。他们获取的地方是不同的。例如：

?

1	echo 'main' | cat

这条命令中cat会从其标准输入中读取内容并处理，也就是会输出 'main' 字符串。echo命令将其标准输出的内容 'main' 经过管道定向到 cat 的标准输入中。

?

1

cat

若是仅仅输入cat并回车，则该程序会等待输入，咱们须要从键盘输入要处理的内容给cat，此时cat也是从标准输入中获得要处理的内容的，由于咱们的cat命令行中也没有指定要处理的文件名。大多数命令有一个参数  -  若是直接在命令的最后指定 -  则表示从标准输入中读取，例如：

?

1	echo 'main' | cat -

这样也是可行的，会显示 'main' 字符串，一样输入 cat - 直接回车与输入 cat 直接回车的效果也同样，可是若是这样呢：

?

1	echo 'main' | cat test .cpp -

同时指定test.cpp 和 - 参数，此时cat程序仍是会显示test.cpp的内容。可是有一个程序的策略则不一样，它是grep，例如：

?

1	echo 'main' | grep 'main' test .cpp -

该命令的输出结果是:
test.cpp:int main()
(standard input):main

此时grep会同时处理标准输入和文件test.cpp中的内容，也就是说会在标准输入中搜索 'main' 也会在文件 test.cpp (该文件名从grep命令行参数中得到)中搜索 'main'。也就是说当命令行中 test.cpp 和 - 两个参数同时存在的时候，不一样的程序处理不一样。咱们看到了cat与grep处理就不一样。可是有一点是同样的，首先在命令行中查找要处理的内容的来源(是从文件仍是从标准输入，仍是都有)，若是在命令行中找不到与要处理的内容的来源相关的参数则默认从标准输入中读取要处理的内容了。

另外不少程序是不处理标准输入的，例如 kill , rm 这些程序若是命令行参数中没有指定要处理的内容则不会默认从标准输入中读取。因此：

?

1	echo '516' | kill

这种命里是不能执行的。

?

1	echo 'test' | rm -f

这种也是没有效果的。

这两个命令只接受命令行参数中指定的处理内容，不从标准输入中获取处理内容。想一想也很正常，kill 是结束进程，rm是删除文件，若是要结束的进程pid和要删除的文件名须要从标准输入中读取，这个也很怪异吧。 可是像 cat与grep这些文字处理工具从标准输入中读取待处理的内容则很天然。

可是有时候咱们的脚本却须要 echo '516' | kill 这样的效果，例如 ps -ef | grep 'ddd' | kill 这样的效果，筛选出符合某条件的进程pid而后结束。这种需求对于咱们来讲是理所固然并且是很常见的，那么应该怎样达到这样的效果呢。有几个解决办法：

1. 经过 kill `ps -ef | grep 'ddd'`    
#这种形式，这个时候实际上等同于拼接字符串获得的命令，其效果相似于  kill $pid

2. for procid in $(ps -aux | grep "some search" | awk '{print $2}'); do kill -9 $procid; done   
#其实与第一种原理同样，只不过须要屡次kill的时候是循环处理的，每次处理一个

3. ps -ef | grep 'ddd' | xargs kill  
#OK，使用了xargs命令，铺垫了这么久终于铺到了主题上。xargs命令能够经过管道接受字符串，并将接收到的字符串经过空格分割成许多参数(默认状况下是经过空格分割) 而后将参数传递给其后面的命令，做为后面命令的命令行参数

回到顶部

xargs是什么，与管道有什么不一样

xargs与管道有什么不一样呢，这是两个很容易混淆的东西，看了上面的xargs的例子仍是有点云里雾里的话，咱们来看下面的例子弄清楚为何须要xargs：

echo '--help' | cat
输出：
--help

echo '--help' | xargs cat
输出：

?

1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 19 20 21 22 23 24 25 26

Usage: cat [OPTION]... [FILE]... Concatenate FILE(s), or standard input, to standard output.      -A, --show-all           equivalent to -vET    -b, --number-nonblank    number nonempty output lines    -e                       equivalent to -vE    -E, --show-ends          display $ at end of each line    -n, --number             number all output lines    -s, --squeeze-blank      suppress repeated empty output lines    -t                       equivalent to -vT    -T, --show-tabs          display TAB characters as ^I    -u                       (ignored)    - v , --show-nonprinting   use ^ and M- notation, except for LFD and TAB        --help     display this help and exit        --version  output version information and exit   With no FILE, or when FILE is -, read standard input.   Examples:    cat f - g  Output f 's contents, then standard input, then g' s contents.    cat        Copy standard input to standard output.   Report cat bugs to bug-coreutils@gnu.org GNU coreutils home page: <http: //www .gnu.org /software/coreutils/ > General help using GNU software: <http: //www .gnu.org /gethelp/ > For complete documentation, run: info coreutils 'cat invocation'

能够看到 echo '--help' | cat   该命令输出的是echo的内容，也就是说将echo的内容看成cat处理的文件内容了，实际上就是echo命令的输出经过管道定向到cat的输入了。而后cat从其标准输入中读取待处理的文本内容。这等价于在test.txt文件中有一行字符 '--help' 而后运行  cat test.txt 的效果。

而 echo '--help' | xargs cat 等价于 cat --help 什么意思呢，就是xargs将其接受的字符串 --help 作成cat的一个命令参数来运行cat命令，一样  echo 'test.c test.cpp' | xargs cat 等价于 cat test.c test.cpp 此时会将test.c和test.cpp的内容都显示出来。

回到顶部

xargs的一些有用的选项

相信到这里应该都知道xargs的做用了，那么咱们看看xargs还有一些有用的选项：

1. -d 选项
默认状况下xargs将其标准输入中的内容以空白(包括空格、Tab、回车换行等)分割成多个以后看成命令行参数传递给其后面的命令，并运行之，咱们可使用 -d 命令指定分隔符，例如：
echo '11@22@33' | xargs echo
输出：
11@22@33
默认状况下以空白分割，那么11@22@33这个字符串中没有空白，因此实际上等价于 echo 11@22@33 其中字符串 '11@22@33' 被看成echo命令的一个命令行参数

echo '11@22@33' | xargs -d '@' echo
输出：
11 22 33
指定以@符号分割参数，因此等价于 echo 11 22 33 至关于给echo传递了3个参数，分别是十一、2二、33

2. -p 选项
使用该选项以后xargs并不会立刻执行其后面的命令，而是输出即将要执行的完整的命令(包括命令以及传递给命令的命令行参数)，询问是否执行，输入 y 才继续执行，不然不执行。这种方式能够清楚的看到执行的命令是什么样子，也就是xargs传递给命令的参数是什么，例如：
echo '11@22@33' | xargs -p -d '@'  echo
输出：
echo 11 22 33
 ?...y      ==>这里询问是否执行命令 echo 11 22 33 输入y并回车，则显示执行结果，不然不执行
 11 22 33   ==>执行结果

3. -n 选项
该选项表示将xargs生成的命令行参数，每次传递几个参数给其后面的命令执行，例如若是xargs从标准输入中读入内容，而后以分隔符分割以后生成的命令行参数有10个，使用 -n 3 以后表示一次传递给xargs后面的命令是3个参数，由于一共有10个参数，因此要执行4次，才能将参数用完。例如：

echo '11@22@33@44@55@66@77@88@99@00' | xargs -d '@' -n 3 echo
输出结果：
11 22 33
44 55 66
77 88 99
00
等价于：
echo 11 22 33
echo 44 55 66
echo 77 88 99
echo 00
实际上运行了4次，每次传递3个参数，最后还剩一个，就直接传递一个参数。

4. -E 选项，有的系统的xargs版本多是-e  eof-str
该选项指定一个字符串，当xargs解析出多个命令行参数的时候，若是搜索到-e指定的命令行参数，则只会将-e指定的命令行参数以前的参数(不包括-e指定的这个参数)传递给xargs后面的命令
echo '11 22 33' | xargs -E '33' echo
输出：
11 22

能够看到正常状况下有3个命令行参数 十一、2二、33 因为使用了-E '33' 表示在将命令行参数 33 以前的参数传递给执行的命令，33自己不传递。等价于 echo 11 22 这里-E实际上有搜索的做用，表示只取xargs读到的命令行参数前面的某些部分给命令执行。

注意：-E只有在xargs不指定-d的时候有效，若是指定了-d则不起做用，而无论-d指定的是什么字符，空格也不行。

echo '11 22 33' | xargs -d ' ' -E '33' echo  => 输出 11 22 33
echo '11@22@33@44@55@66@77@88@99@00 aa 33 bb' | xargs -E '33' -d '@' -p  echo  => 输出 11 22 33 44 55 66 77 88 99 00 aa 33 bb

## -0 选项表示以 '\0' 为分隔符，通常与find结合使用

find . -name "*.txt"
输出：
./2.txt
./3.txt
./1.txt     => 默认状况下find的输出结果是每条记录后面加上换行，也就是每条记录是一个新行

find . -name "*.txt" -print0
输出：
./2.txt./3.txt./1.txt     => 加上 -print0 参数表示find输出的每条结果后面加上 '\0' 而不是换行

find . -name "*.txt" -print0 | xargs -0 echo
输出：
./2.txt ./3.txt ./1.txt

find . -name "*.txt" -print0 | xargs -d '\0' echo
输出：
./2.txt ./3.txt ./1.txt

xargs的 -0 和 -d '\0' 表示其从标准输入中读取的内容使用 '\0' 来分割，因为 find 的结果是使用 '\0' 分隔的，因此xargs使用 '\0' 将 find的结果分隔以后获得3个参数： ./2.txt ./3.txt ./1.txt  注意中间是有空格的。上面的结果就等价于 echo ./2.txt ./3.txt ./1.txt

实际上使用xargs默认的空白分隔符也是能够的  find . -name "*.txt"  | xargs  echo   由于换行符也是xargs的默认空白符的一种。find命令若是不加-print0其搜索结果的每一条字符串后面其实是加了换行

 

原文连接：https://www.jb51.net/article/102397.htm

1.功能：

xargs能够将stdin中以空格或换行符进行分隔的数据，造成以空格分隔的参数（arguments），传递给其余命令。由于以空格做为分隔符，因此有一些文件名或者其余意义的名词内含有空格的时候，xargs可能会误判。简单来讲，xargs是给其余命令传递参数的一个过滤器，是构建单行命令的重要组件之一。

之因此要用到xargs，是由于因为不少命令不支持使用管道|来传递参数，例如：

?

1 2	find /sbin -perm +700 | ls -l     // 这个命令是错误,由于标准输入不能做为 ls 的参数 find /sbin -perm +700 | xargs ls -l  // 这样才是正确的

2.命令格式

?

1	xargs [选项] [ command ]

3.选项说明：

?

1 2 3 4 5 6 7 8 9 10 11 12 13

-0：若是输入的stdin含有特殊字符，例如反引号`、反斜杠\、空格等字符时， xargs 能够将它还原成通常字符。为 xargs 的默认选项。 -e <flag>,-E <flag>,--eof=<eof-str>：eof是end of file string的意思。flag能够是一个字符串或者是由空格分隔的多个字符串，当 xargs 分析到这个flag时，就会中止工做。见示例2。 -p：当每次执行一个argument的时候询问一次用户。 -n <num>：表示命令在执行的时候一次使用的argument的个数，由num指定，默认是用全部的参数。 -t：表示先打印命令，而后再执行。 -a < file >:从文件中读入做为sdtin。 -i,-I：其中-I某些Linux版本不支持。将 xargs 的输出每一项参数，单独赋值给后面的命令，参数须要用{}代替。见示例3。 -r:或者--no-run- if -empty,当 xargs 的输入为空的时候则中止 xargs ，不用再去执行后面的命令了，-r是 xargs 的默认选项。 -s <num>:命令行的最大字符数，指的是 xargs 后面那个命令的最大命令行字符数,包括命令、空格和换行符。每一个参数单独传入 xargs 后面的命令。见示例4。 -L <line_num>：设置标准输入中最大的行数做为命令每一次执行的参数。见示例5。 -d <delim>, --delimiter=<delim>: xargs 处理标准输入默认是按换行符和空格做为分隔符，输出arguments的分隔符是空格，这里修改 xargs 处理标准输入时的分隔符。 -x：eXit的意思，主要是配合-s使用，当命令行字符数大于-s指定的数值时，退出 xargs 。 -P：修改最大的进程数，默认是1，为0时候为as many as it can。该选项比较少用，目前还不清楚该用法。

4.用法示例

（1）将shell的特殊字符还原为通常字符。

?

1 2 3

[b3335@MIC ~]$ echo '`0123`4 56789' |xargs -t echo echo `0123`4 56789 `0123`4 56789

若是直接进行以下操做，会报没法找到命令01234的错误，由于反引号在shell中会将01234做为一个命令来执行，可是01234不是一个命令。-t表示先打印命令，而后再执行。

?

1 2 3

[b3335@MIC ~]$ echo `01234` 56789 - bash : 01234: command not found 56789

（2）设置xargs读入参数时的结束标识，以逗号结束。这里要注意结束标志必需要是单独的字段，即以空格或者换行符分隔的字段。

?

1 2	[b3335@MIC ~]$ echo 01234 , 56789| xargs -E "," 01234

（3）将当前目录的全部文件添加后缀名。

?

1	ls | xargs -t -i mv {} {}.bak

（4）设置命令行的最大字符数。参数默认一个一个单独传入命令中执行。

?

1 2 3 4 5

[b3335@MIC test ]$ echo "01234 56789" | xargs -t -s 11 echo 01234 01234 echo 56789 56789

（5）设置标准输入中每次多少行做为命令的参数，默认是将标准输入中全部行的归并到一行一次性传给命令执行。

?

1 2 3 4 5

[b3335@MIC test ]$ echo -e "01234\n56789\n01234" | xargs -t -L 2 echo echo 01234 56789 01234 56789 echo 01234 01234

（6）将文件内容以空格分隔同行输出。

?

1 2 3 4 5 6 7 8 9

// 列出文件内容 cat test .txt a b c d e f g h i j k l m n o   // 多行输入单行输出： cat test .txt | xargs a b c d e f g h i j k l m n o