xargs命令詳解

  

基礎命令學習目錄

 

原文連接：https://www.cnblogs.com/wangqiguo/p/6464234.html

爲何要用xargs，問題的來源

在工做中常常會接觸到xargs命令，特別是在別人寫的腳本里面也常常會遇到，可是卻很容易與管道搞混淆，本篇會詳細講解到底什麼是xargs命令，爲何要用xargs命令以及與管道的區別。爲何要用xargs呢，咱們知道，linux命令能夠從兩個地方讀取要處理的內容，一個是經過命令行參數，一個是標準輸入。例如cat、grep就是這樣的命令，舉個例子：

?

1	echo 'main' | cat test .cpp

這種狀況下cat會輸出test.cpp的內容，而不是'main'字符串，若是test.cpp不存在則cat命令報告該文件不存在，並不會嘗試從標準輸入中讀取。echo 'main' | 會經過管道將 echo 的標準輸出(也就是字符串'main')導入到 cat 的標準輸入，也就是說此時cat的標準輸入中是有內容的，其內容就是字符串'main'可是上面的內容中cat不會從它的標準輸入中讀入要處理的內容。(注:標準輸入是有一個緩衝區的，就像咱們在程序中使用scanf函數從標準輸入中讀取同樣，其實是從標準輸入的緩衝區中讀取的)。其實基本上linux的命令中不少的命令的設計是先從命令行參數中獲取參數，而後從標準輸入中讀取，反映在程序上，命令行參數是經過main函數 int main(int argc,char*argv[]) 的函數參數得到的，而標準輸入則是經過標準輸入函數例如C語言中的scanf讀取到的。他們獲取的地方是不同的。例如：

?

1	echo 'main' | cat

這條命令中cat會從其標準輸入中讀取內容並處理，也就是會輸出 'main' 字符串。echo命令將其標準輸出的內容 'main' 經過管道定向到 cat 的標準輸入中。

?

1

cat

若是僅僅輸入cat並回車，則該程序會等待輸入，咱們須要從鍵盤輸入要處理的內容給cat，此時cat也是從標準輸入中獲得要處理的內容的，由於咱們的cat命令行中也沒有指定要處理的文件名。大多數命令有一個參數  -  若是直接在命令的最後指定 -  則表示從標準輸入中讀取，例如：

?

1	echo 'main' | cat -

這樣也是可行的，會顯示 'main' 字符串，一樣輸入 cat - 直接回車與輸入 cat 直接回車的效果也同樣，可是若是這樣呢：

?

1	echo 'main' | cat test .cpp -

同時指定test.cpp 和 - 參數，此時cat程序仍是會顯示test.cpp的內容。可是有一個程序的策略則不一樣，它是grep，例如：

?

1	echo 'main' | grep 'main' test .cpp -

該命令的輸出結果是:
test.cpp:int main()
(standard input):main

此時grep會同時處理標準輸入和文件test.cpp中的內容，也就是說會在標準輸入中搜索 'main' 也會在文件 test.cpp (該文件名從grep命令行參數中得到)中搜索 'main'。也就是說當命令行中 test.cpp 和 - 兩個參數同時存在的時候，不一樣的程序處理不一樣。咱們看到了cat與grep處理就不一樣。可是有一點是同樣的，首先在命令行中查找要處理的內容的來源(是從文件仍是從標準輸入，仍是都有)，若是在命令行中找不到與要處理的內容的來源相關的參數則默認從標準輸入中讀取要處理的內容了。

另外不少程序是不處理標準輸入的，例如 kill , rm 這些程序若是命令行參數中沒有指定要處理的內容則不會默認從標準輸入中讀取。因此：

?

1	echo '516' | kill

這種命裏是不能執行的。

?

1	echo 'test' | rm -f

這種也是沒有效果的。

這兩個命令只接受命令行參數中指定的處理內容，不從標準輸入中獲取處理內容。想一想也很正常，kill 是結束進程，rm是刪除文件，若是要結束的進程pid和要刪除的文件名須要從標準輸入中讀取，這個也很怪異吧。 可是像 cat與grep這些文字處理工具從標準輸入中讀取待處理的內容則很天然。

可是有時候咱們的腳本卻須要 echo '516' | kill 這樣的效果，例如 ps -ef | grep 'ddd' | kill 這樣的效果，篩選出符合某條件的進程pid而後結束。這種需求對於咱們來講是理所固然並且是很常見的，那麼應該怎樣達到這樣的效果呢。有幾個解決辦法：

1. 經過 kill `ps -ef | grep 'ddd'`    
#這種形式，這個時候實際上等同於拼接字符串獲得的命令，其效果相似於  kill $pid

2. for procid in $(ps -aux | grep "some search" | awk '{print $2}'); do kill -9 $procid; done   
#其實與第一種原理同樣，只不過須要屢次kill的時候是循環處理的，每次處理一個

3. ps -ef | grep 'ddd' | xargs kill  
#OK，使用了xargs命令，鋪墊了這麼久終於鋪到了主題上。xargs命令能夠經過管道接受字符串，並將接收到的字符串經過空格分割成許多參數(默認狀況下是經過空格分割) 而後將參數傳遞給其後面的命令，做爲後面命令的命令行參數

回到頂部

xargs是什麼，與管道有什麼不一樣

xargs與管道有什麼不一樣呢，這是兩個很容易混淆的東西，看了上面的xargs的例子仍是有點雲裏霧裏的話，咱們來看下面的例子弄清楚爲何須要xargs：

echo '--help' | cat
輸出：
--help

echo '--help' | xargs cat
輸出：

?

1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 19 20 21 22 23 24 25 26

Usage: cat [OPTION]... [FILE]... Concatenate FILE(s), or standard input, to standard output.      -A, --show-all           equivalent to -vET    -b, --number-nonblank    number nonempty output lines    -e                       equivalent to -vE    -E, --show-ends          display $ at end of each line    -n, --number             number all output lines    -s, --squeeze-blank      suppress repeated empty output lines    -t                       equivalent to -vT    -T, --show-tabs          display TAB characters as ^I    -u                       (ignored)    - v , --show-nonprinting   use ^ and M- notation, except for LFD and TAB        --help     display this help and exit        --version  output version information and exit   With no FILE, or when FILE is -, read standard input.   Examples:    cat f - g  Output f 's contents, then standard input, then g' s contents.    cat        Copy standard input to standard output.   Report cat bugs to bug-coreutils@gnu.org GNU coreutils home page: <http: //www .gnu.org /software/coreutils/ > General help using GNU software: <http: //www .gnu.org /gethelp/ > For complete documentation, run: info coreutils 'cat invocation'

能夠看到 echo '--help' | cat   該命令輸出的是echo的內容，也就是說將echo的內容看成cat處理的文件內容了，實際上就是echo命令的輸出經過管道定向到cat的輸入了。而後cat從其標準輸入中讀取待處理的文本內容。這等價於在test.txt文件中有一行字符 '--help' 而後運行  cat test.txt 的效果。

而 echo '--help' | xargs cat 等價於 cat --help 什麼意思呢，就是xargs將其接受的字符串 --help 作成cat的一個命令參數來運行cat命令，一樣  echo 'test.c test.cpp' | xargs cat 等價於 cat test.c test.cpp 此時會將test.c和test.cpp的內容都顯示出來。

回到頂部

xargs的一些有用的選項

相信到這裏應該都知道xargs的做用了，那麼咱們看看xargs還有一些有用的選項：

1. -d 選項
默認狀況下xargs將其標準輸入中的內容以空白(包括空格、Tab、回車換行等)分割成多個以後看成命令行參數傳遞給其後面的命令，並運行之，咱們可使用 -d 命令指定分隔符，例如：
echo '11@22@33' | xargs echo
輸出：
11@22@33
默認狀況下以空白分割，那麼11@22@33這個字符串中沒有空白，因此實際上等價於 echo 11@22@33 其中字符串 '11@22@33' 被看成echo命令的一個命令行參數

echo '11@22@33' | xargs -d '@' echo
輸出：
11 22 33
指定以@符號分割參數，因此等價於 echo 11 22 33 至關於給echo傳遞了3個參數，分別是十一、2二、33

2. -p 選項
使用該選項以後xargs並不會立刻執行其後面的命令，而是輸出即將要執行的完整的命令(包括命令以及傳遞給命令的命令行參數)，詢問是否執行，輸入 y 才繼續執行，不然不執行。這種方式能夠清楚的看到執行的命令是什麼樣子，也就是xargs傳遞給命令的參數是什麼，例如：
echo '11@22@33' | xargs -p -d '@'  echo
輸出：
echo 11 22 33
 ?...y      ==>這裏詢問是否執行命令 echo 11 22 33 輸入y並回車，則顯示執行結果，不然不執行
 11 22 33   ==>執行結果

3. -n 選項
該選項表示將xargs生成的命令行參數，每次傳遞幾個參數給其後面的命令執行，例如若是xargs從標準輸入中讀入內容，而後以分隔符分割以後生成的命令行參數有10個，使用 -n 3 以後表示一次傳遞給xargs後面的命令是3個參數，由於一共有10個參數，因此要執行4次，才能將參數用完。例如：

echo '11@22@33@44@55@66@77@88@99@00' | xargs -d '@' -n 3 echo
輸出結果：
11 22 33
44 55 66
77 88 99
00
等價於：
echo 11 22 33
echo 44 55 66
echo 77 88 99
echo 00
實際上運行了4次，每次傳遞3個參數，最後還剩一個，就直接傳遞一個參數。

4. -E 選項，有的系統的xargs版本多是-e  eof-str
該選項指定一個字符串，當xargs解析出多個命令行參數的時候，若是搜索到-e指定的命令行參數，則只會將-e指定的命令行參數以前的參數(不包括-e指定的這個參數)傳遞給xargs後面的命令
echo '11 22 33' | xargs -E '33' echo
輸出：
11 22

能夠看到正常狀況下有3個命令行參數 十一、2二、33 因爲使用了-E '33' 表示在將命令行參數 33 以前的參數傳遞給執行的命令，33自己不傳遞。等價於 echo 11 22 這裏-E實際上有搜索的做用，表示只取xargs讀到的命令行參數前面的某些部分給命令執行。

注意：-E只有在xargs不指定-d的時候有效，若是指定了-d則不起做用，而無論-d指定的是什麼字符，空格也不行。

echo '11 22 33' | xargs -d ' ' -E '33' echo  => 輸出 11 22 33
echo '11@22@33@44@55@66@77@88@99@00 aa 33 bb' | xargs -E '33' -d '@' -p  echo  => 輸出 11 22 33 44 55 66 77 88 99 00 aa 33 bb

## -0 選項表示以 '\0' 爲分隔符，通常與find結合使用

find . -name "*.txt"
輸出：
./2.txt
./3.txt
./1.txt     => 默認狀況下find的輸出結果是每條記錄後面加上換行，也就是每條記錄是一個新行

find . -name "*.txt" -print0
輸出：
./2.txt./3.txt./1.txt     => 加上 -print0 參數表示find輸出的每條結果後面加上 '\0' 而不是換行

find . -name "*.txt" -print0 | xargs -0 echo
輸出：
./2.txt ./3.txt ./1.txt

find . -name "*.txt" -print0 | xargs -d '\0' echo
輸出：
./2.txt ./3.txt ./1.txt

xargs的 -0 和 -d '\0' 表示其從標準輸入中讀取的內容使用 '\0' 來分割，因爲 find 的結果是使用 '\0' 分隔的，因此xargs使用 '\0' 將 find的結果分隔以後獲得3個參數： ./2.txt ./3.txt ./1.txt  注意中間是有空格的。上面的結果就等價於 echo ./2.txt ./3.txt ./1.txt

實際上使用xargs默認的空白分隔符也是能夠的  find . -name "*.txt"  | xargs  echo   由於換行符也是xargs的默認空白符的一種。find命令若是不加-print0其搜索結果的每一條字符串後面其實是加了換行

 

原文連接：https://www.jb51.net/article/102397.htm

1.功能：

xargs能夠將stdin中以空格或換行符進行分隔的數據，造成以空格分隔的參數（arguments），傳遞給其餘命令。由於以空格做爲分隔符，因此有一些文件名或者其餘意義的名詞內含有空格的時候，xargs可能會誤判。簡單來講，xargs是給其餘命令傳遞參數的一個過濾器，是構建單行命令的重要組件之一。

之因此要用到xargs，是由於因爲不少命令不支持使用管道|來傳遞參數，例如：

?

1 2	find /sbin -perm +700 | ls -l     // 這個命令是錯誤,由於標準輸入不能做爲 ls 的參數 find /sbin -perm +700 | xargs ls -l  // 這樣纔是正確的

2.命令格式

?

1	xargs [選項] [ command ]

3.選項說明：

?

1 2 3 4 5 6 7 8 9 10 11 12 13

-0：若是輸入的stdin含有特殊字符，例如反引號`、反斜槓\、空格等字符時， xargs 能夠將它還原成通常字符。爲 xargs 的默認選項。 -e <flag>,-E <flag>,--eof=<eof-str>：eof是end of file string的意思。flag能夠是一個字符串或者是由空格分隔的多個字符串，當 xargs 分析到這個flag時，就會中止工做。見示例2。 -p：當每次執行一個argument的時候詢問一次用戶。 -n <num>：表示命令在執行的時候一次使用的argument的個數，由num指定，默認是用全部的參數。 -t：表示先打印命令，而後再執行。 -a < file >:從文件中讀入做爲sdtin。 -i,-I：其中-I某些Linux版本不支持。將 xargs 的輸出每一項參數，單獨賦值給後面的命令，參數須要用{}代替。見示例3。 -r:或者--no-run- if -empty,當 xargs 的輸入爲空的時候則中止 xargs ，不用再去執行後面的命令了，-r是 xargs 的默認選項。 -s <num>:命令行的最大字符數，指的是 xargs 後面那個命令的最大命令行字符數,包括命令、空格和換行符。每一個參數單獨傳入 xargs 後面的命令。見示例4。 -L <line_num>：設置標準輸入中最大的行數做爲命令每一次執行的參數。見示例5。 -d <delim>, --delimiter=<delim>: xargs 處理標準輸入默認是按換行符和空格做爲分隔符，輸出arguments的分隔符是空格，這裏修改 xargs 處理標準輸入時的分隔符。 -x：eXit的意思，主要是配合-s使用，當命令行字符數大於-s指定的數值時，退出 xargs 。 -P：修改最大的進程數，默認是1，爲0時候爲as many as it can。該選項比較少用，目前還不清楚該用法。

4.用法示例

（1）將shell的特殊字符還原爲通常字符。

?

1 2 3

[b3335@MIC ~]$ echo '`0123`4 56789' |xargs -t echo echo `0123`4 56789 `0123`4 56789

若是直接進行以下操做，會報沒法找到命令01234的錯誤，由於反引號在shell中會將01234做爲一個命令來執行，可是01234不是一個命令。-t表示先打印命令，而後再執行。

?

1 2 3

[b3335@MIC ~]$ echo `01234` 56789 - bash : 01234: command not found 56789

（2）設置xargs讀入參數時的結束標識，以逗號結束。這裏要注意結束標誌必需要是單獨的字段，即以空格或者換行符分隔的字段。

?

1 2	[b3335@MIC ~]$ echo 01234 , 56789| xargs -E "," 01234

（3）將當前目錄的全部文件添加後綴名。

?

1	ls | xargs -t -i mv {} {}.bak

（4）設置命令行的最大字符數。參數默認一個一個單獨傳入命令中執行。

?

1 2 3 4 5

[b3335@MIC test ]$ echo "01234 56789" | xargs -t -s 11 echo 01234 01234 echo 56789 56789

（5）設置標準輸入中每次多少行做爲命令的參數，默認是將標準輸入中全部行的歸併到一行一次性傳給命令執行。

?

1 2 3 4 5

[b3335@MIC test ]$ echo -e "01234\n56789\n01234" | xargs -t -L 2 echo echo 01234 56789 01234 56789 echo 01234 01234

（6）將文件內容以空格分隔同行輸出。

?

1 2 3 4 5 6 7 8 9

// 列出文件內容 cat test .txt a b c d e f g h i j k l m n o   // 多行輸入單行輸出： cat test .txt | xargs a b c d e f g h i j k l m n o