linux命令--xargs命令


簡介

  大多數 Linux 命令都會產生輸出:文件列表、字符串列表等。但如果要使用其他某個命令並將前一個命令的輸出作為參數該怎么辦?例如,file 命令顯示文件類型(可執行文件、ascii 文本等);你能處理輸出,使其僅顯示文件名,目前你希望將這些名稱傳遞給 ls -l 命令以查看時間戳記。xargs 命令就是用來完成此項工作的。他允許你對輸出執行其他某些命令。

  xargs是給命令傳遞參數的一個過濾器,也是組合多個命令的一個工具。它把一個數據流分割為一些足夠小的塊,以方便過濾器和命令進行處理。通常情況下,xargs從管道或者stdin中讀取數據,但是它也能夠從文件的輸出中讀取數據。xargs的默認命令是echo,這意味着通過管道傳遞給xargs的輸入將會包含換行和空白(如一些文檔名或者是其他意義的名詞內含有空白字元時),不過通過xargs的處理,換行和空白將被空格取代。

例如:

這個命令是錯誤的
find /sbin -perm +700 |ls -l

這樣才是正確的
find /sbin -perm +700 |xargs ls -l   

 

 語法:xargs [-p t x ] [-e [EOFString]] [-E EOFString] [-i [ReplaceString] ] [-I ReplaceString | -L Number | -n Number] [ -l [ Number]] [-s Size] [Command [Argument ... ]]

 

參數實例講解

選項解釋
-0 :當sdtin含有特殊字元時候,將其當成一般字符,想/'空格等
$ echo "/ /  "|xargs echo
/ /
$ echo "/ /  "|xargs -0 echo
/ /  

-a file 從文件中讀入作為sdtin

$ cat 1.txt 
aaa  bbb ccc ddd
a    b
$ xargs -a 1.txt echo
aaa bbb ccc ddd a b


-e flag ,注意有的時候可能會是-E,flag必須是一個以空格分隔的標志,當xargs分析到含有flag這個標志的時候就停止。

$ xargs -E 'ddd'  -a 1.txt echo
aaa bbb ccc

$ cat 1.txt |xargs -E 'ddd' echo
aaa bbb ccc

-n num 后面加次數,表示命令在執行的時候一次用的argument的個數,默認是用所有的。

$ cat 1.txt |xargs -n 2 echo
aaa bbb
ccc ddd
a b


-p 操作具有可交互性,每次執行comand都交互式提示用戶選擇,當每次執行一個argument的時候詢問一次用戶

$ cat 1.txt |xargs -p echo
echo aaa bbb ccc ddd a b ?...y
aaa bbb ccc ddd a b
$ cat 1.txt |xargs -p echo
echo aaa bbb ccc ddd a b ?...n


-t 表示先打印命令,然后再執行。

$ cat 1.txt |xargs -t echo
echo aaa bbb ccc ddd a b 
aaa bbb ccc ddd a b


-i 或者是-I,這得看linux支持了,將xargs的每項名稱,一般是一行一行賦值給{},可以用{}代替。

$ ls
1.txt  2.txt  3.txt  log.xml
$ ls *.txt |xargs -t -i mv {} {}.bak
mv 1.txt 1.txt.bak 
mv 2.txt 2.txt.bak 
mv 3.txt 3.txt.bak 
$ ls
1.txt.bak  2.txt.bak  3.txt.bak  log.xml

注意,-I 必須指定替換字符 -i 是否指定替換字符-可選
find . | xargs -I {} cp {} $D_PATH

find . | xargs -i cp {} $D_PATH

注意:cshell和tcshell中,需要將{}用單引號、雙引號或反斜杠,否則不認識。bash可以不用。
find /shell -maxdepth 2 -name a -print | xargs -t -i sed -i '1 i\111' ‘{}‘


-r  no-run-if-empty 如果沒有要處理的參數傳遞給xargsxargs 默認是帶 空參數運行一次,如果你希望無參數時,停止 xargs,直接退出,使用 -r 選項即可,其可以防止xargs 后面命令帶空參數運行報錯。

$ echo ""|xargs -t mv
mv 
mv: missing file operand
Try `mv --help' for more information.
$ echo ""|xargs -t -r mv         #直接退出


-s num xargs后面那個命令的最大命令行字符數(含空格) 
$ cat 1.txt.bak |xargs  -s 9 echo
aaa
bbb
ccc
ddd
a b
$ cat 1.txt.bak |xargs  -s 4 echo
xargs: can not fit single argument within argument list size limit      #length(echo)=4
$ cat 1.txt.bak |xargs  -s 8 echo
xargs: argument line too long      #length(echo)=4,length(aaa)=3,length(null)=1,total_length=8


-L  從標准輸入一次讀取num行送給Command命令 ,-l和-L功能一樣

$ cat 1.txt.bak 
aaa bbb ccc ddd
a b
ccc
dsds
$ cat 1.txt.bak |xargs  -L 4 echo
aaa bbb ccc ddd a b ccc dsds
$ cat 1.txt.bak |xargs  -L 1 echo
aaa bbb ccc ddd
a b
ccc
dsds


-d delim 分隔符,默認的xargs分隔符是回車,argument的分隔符是空格,這里修改的是xargs的分隔符

$ cat 1.txt.bak 
aaa@ bbb ccc@ ddd
a b

$ cat 1.txt.bak |xargs  -d '@' echo
aaa  bbb ccc  ddd
a b

-x exit的意思,如果有任何 Command 行大於 -s Size 標志指定的字節數,停止運行 xargs 命令,-L -I -n 默認打開-x參數,主要是配合-s使用
-P 修改最大的進程數,默認是1,為0時候為as many as it can 。

 

 

使用實例

實例:命令說明

命令:file -Lz * | grep ASCII | cut -d":" -f1 | xargs ls -ltr

第一個,file -Lz *,用於查找是符號鏈接或經過壓縮的文件。他將輸出傳遞給下一個命令 grep ASCII,該命令在其中搜索 "ASCII" 字符串並產生如下所示的輸出:

alert_DBA102.log:        ASCII English text
alert_DBA102.log.Z:      ASCII text (compress’d data 16 bits)

由於只對文件名感興趣,因此我們應用下一個命令 cut -d":" -f1,僅顯示第一個字段:

alert_DBA102.log
alert_DBA102.log.Z

使用 ls -l 命令,將上述列表作為參數進行傳遞,一次傳遞一個。xargs 命令允許你這樣做。最后一部分,xargs ls -ltr,用於接收輸出並對其執行 ls -ltr 命令,如下所示:
ls -ltr alert_DBA102.log
ls -ltr alert_DBA102.log.Z

實例:file * | grep ASCII | cut -d":" -f1 | xargs wc -l

也可以使用此命令: wc -l ‘file * | grep ASCII | cut -d":" -f1 | grep ASCII | cut -d":" -f1‘
使用該方法,能快速重命名目錄中的文件。

 

實例: ls | xargs -t -i mv {} {}.bak
-i 選項告訴 xargs 用每項的名稱替換 {}。

-t 選項指示 xargs 先打印命令,然后再執行。

 

實例: file * | grep ASCII | cut -d":" -f1 | xargs vi
該命令使用 vi 逐個打開文件。當你希望搜索多個文件並打開他們進行編輯時,使用該命令非常方便。 

 

實例:
$ file * | grep ASCII | cut -d":" -f1 | xargs -p vi
vi alert_DBA102.log dba102_cjq0_14493.trc dba102_mmnl_14497.trc
dba102_reco_14491.trc dba102_rvwr_14518.trc ?...
此處的 xarg 需求你在運行每個命令之前進行確認。如果你按下 "y",則執行命令。當你對文件進行某些可能有破壞且不可恢復的操作(如刪除或覆蓋)時,你會發現該選項非常有用。
-t 選項使用一個周詳模式;他顯示要運行的命令,是調試過程中一個非常有幫助的選項。

實例:如果傳遞給 xargs 的輸出為空怎么辦?
$ file * | grep SSSSSS | cut -d":" -f1 | xargs -t wc -l
在此處,搜索 "SSSSSS" 后沒有匹配的內容;因此 xargs 的輸入均為空,如第二行所示(由於我們使用 -t 這個周詳選項而產生的結果)。雖然這可能會有所幫助,但在某些情況下,如果沒有要處理的內容,你可能希望停止 xargs;如果是這樣,能使用 -r 選項:

$ file * | grep SSSSSS | cut -d":" -f1 | xargs -t -r wc -l
$
如果沒有要運行的內容,該命令退出。


實例:xargs 的 -n 選項限制單個命令行的參數個數。 

假設你希望使用 rm 命令(該命令將作為 xargs 命令的參數)刪除文件。然而,rm 只能接受有限數量的參數。如果你的參數列表超出該限制怎么辦?xargs 的 -n 選項限制單個命令行的參數個數。

下面顯示了怎么限制每個命令行僅使用兩個參數:即使向 xargs ls -ltr 傳遞五個文件,但每次向 ls -ltr 僅傳遞兩個文件。
$ file * | grep ASCII | cut -d":" -f1 | xargs -t -n2 ls -ltr
ls -ltr alert_DBA102.log dba102_cjq0_14493.trc
-rw-r-----    1 oracle   dba           738 Aug 10 19:18 dba102_cjq0_14493.trc
-rw-r--r--    1 oracle   dba       2410225 Aug 13 05:31 alert_DBA102.log

使用該方法,你能快速重命名目錄中的文件。

比較實用的應用
$ ls | xargs -t -i mv {} {}.bak
-i 選項告訴 xargs 用每項的名稱替換 {}。

 

刪除數量比較多的文件
ls | xargs -n 20 rm -fr
ls當然是輸出所有的文件名(用空格分割)
xargs就是將ls的輸出,每20個為一組(以空格為分隔符),作為rm -rf的參數。也就是說將所有文件名20個為一組,由rm -rf刪除,這樣就不會超過命令行的長度了

 

 

與find的結合

在使用find命令的-exec選項處理匹配到的文件時, find命令將所有匹配到的文件一起傳遞給exec執行。但有些系統對能夠傳遞給exec的命令長度有限制,這樣在find命令運行幾分鍾之后,就會出現 溢出錯誤。錯誤信息通常是“參數列太長”或“參數列溢出”。這就是xargs命令的用處所在,特別是與find命令一起使用。find命令把匹配到的文件 傳遞給xargs命令,而xargs命令每次只獲取一部分文件而不是全部,不像-exec選項那樣。這樣它可以先處理最先獲取的一部分文件,然后是下一 批,並如此繼續下去。

在有些系統中,使用-exec選項會 為處理每一個匹配到的文件而發起一個相應的進程,並非將匹配到的文件全部作為參數一次執行;這樣在有些情況下就會出現進程過多,系統性能下降的問題,因而 效率不高;而使用xargs命令則只有一個進程。另外,在使用xargs命令時,究竟是一次獲取所有的參數,還是分批取得參數,以及每一次獲取參數的數目 都會根據該命令的選項及系統內核中相應的可調參數來確定。

管 道是把一個命令的輸出傳遞給另一個命令作為輸入,比如:command1 | command2但是command2僅僅把輸出的內容作為輸入參數。find . -name "install.log" -print打印出的是install.log這個字符串,如果僅僅使用管道,那么command2能夠使用的僅僅是install.log這個字符串, 不能把它當作文件來進行處理。

當然這個command2除了xargs。xargs就是為了能夠對find搜索到的文件進行操作而編寫的。它能把管道傳來的字符串當作文件交給其后的命令執行。

在有些系統中,使用-exec選項會 為處理每一個匹配到的文件而發起一個相應的進程,並非將匹配到的文件全部作為參數一次執行;這樣在有些情況下就會出現進程過多,系統性能下降的問題,因而 效率不高;而使用xargs命令則只有一個進程。另外,在使用xargs命令時,究竟是一次獲取所有的參數,還是分批取得參數,以及每一次獲取參數的數目 都會根據該命令的選項及系統內核中相應的可調參數來確定。

管 道是把一個命令的輸出傳遞給另一個命令作為輸入,比如:command1 | command2但是command2僅僅把輸出的內容作為輸入參數。find . -name "install.log" -print打印出的是install.log這個字符串,如果僅僅使用管道,那么command2能夠使用的僅僅是install.log這個字符串, 不能把它當作文件來進行處理。

當然這個command2除了xargs。xargs就是為了能夠對find搜索到的文件進行操作而編寫的。它能把管道傳來的字符串當作文件交給其后的命令執行。
舉個例子:
$find . -name "install.log" -print | cat
./install.log                                                 #顯示從管道傳來的內容,僅僅作為字符串來處理
$find . -name "install.log" -print | xargs cat
aaaaaa                                                      #將管道傳來的內容作為文件,交給cat執行。也就是說,該命令執行的是如果存在install.log,那么就打印出這個文件的內容。
來看看xargs命令是如何同find命令一起使用的,並給出一些例子。

 

1. 當嘗試用rm 刪除太多的文件,可能得到一個錯誤信息:/bin/rm Argument list too long. 用xargs 去避免這個問題

find ~ -name ‘*.log’ -print0 | xargs -0 rm -f

 

2. 獲得/etc/ 下所有*.conf 結尾的文件列表,有幾種不同的方法能得到相同的結果,下面的例子僅僅是示范怎么實用xargs ,在這個例子中實用 xargs將find 命令的輸出傳遞給ls -l

# find /etc -name "*.conf" | xargs ls –l


3. 假如你有一個文件包含了很多你希望下載的URL, 你能夠使用xargs 下載所有鏈接

# cat url-list.txt | xargs wget –c

 

4. 查找所有的jpg 文件,並且壓縮它

# find / -name *.jpg -type f -print | xargs tar -cvzf images.tar.gz


5. 拷貝所有的圖片文件到一個外部的硬盤驅動 

# ls *.jpg | xargs -n1 -i cp {} /external-hard-drive/directory

 

參考:

http://czmmiao.iteye.com/blog/1949225

http://blog.csdn.net/sunboy_2050/article/details/7303501

 


免責聲明!

本站轉載的文章為個人學習借鑒使用,本站對版權不負任何法律責任。如果侵犯了您的隱私權益,請聯系本站郵箱yoyou2525@163.com刪除。



 
粵ICP備18138465號   © 2018-2025 CODEPRJ.COM