xargs用法詳解

前言

　最近我從svn上checkout出來了一個文件夾,然後加入了git的跟蹤目錄.用過svn的同學可能知道,這個文件夾裡面每一層級都有個.svn隱藏文件夾,需要刪除他們.本來我准備笨拙地一個一個手動刪除的,一位同事在我面前敲了大概是$find . -type d -name "*.svn" | xargs rm -rf這樣的命令,頓時覺得很高端大氣上檔次.剛好新學了Markdown,就順便整理下xargs的用法,練練手.主要的參考來自於偉大的$man xargs.

1.概述

xargs從標准輸入(stdin)中讀取數據進行處理

• 數據以空格進行分隔
• 可以根據參數進行一次或多次處理,默認的處理命令是/bin/echo
• 空行不進行處理,會被忽略
• 遇到命令狀態為255時,xargs會立刻停止,譬如發生錯誤時.

下面我們來看看xargs有哪些參數可以選擇.

2.options

• -a file
  : 從file中讀入數據

  $cat 1.txt
  aaa bbb ccc ddd
  a b
  $xargs -a 1.txt 
  aaa bbb ccc ddd a b

• -0
  : 當輸入有特殊字符時,將其當作一般字符處理,比如""和空格

  $echo "// " | xargs
  //
  $echo "// " | xargs -0
  //
  　

• -d
  : 指定分隔符

  $cat 1.txt
  aaa bbb ccc ddd
  a b
  $cat 1.txt | xargs -d 'c'
  aaa bbb     ddd
  a b
  　

• -E eof-str
  : 指定結束標志為eof-str,xargs處理到這個標志就會停止

  $xargs -E 'ddd' -a 1.txt
  aaa bbb ccc
  $xargs -E 'dd' -a 1.txt
  aaa bbb ccc ddd a b
  $cat 1.txt | xargs -E 'ddd'
  aaa bbb ccc

• -I replace-str
  : 將每行輸入輸入內容替換為replace-str

  $cat 1.txt
  aaa bbb ccc ddd
  a b
  $cat 1.txt | xargs -t -I {} echo {} >> 1.txt
  echo aaa bbb ccc ddd 
  echo a b
  $cat 1.txt
  aaa bbb ccc ddd
  a b
  aaa bbb ccc ddd
  a b

• -i
  : 等同於-I{}

  $cat 1.txt
  aaa bbb ccc ddd
  a b
  $cat 1.txt | xargs -t -i echo {} >> 1.txt
  echo aaa bbb ccc ddd 
  echo a b
  $cat 1.txt
  aaa bbb ccc ddd
  a b
  aaa bbb ccc ddd
  a b

• -L max-lines
  : 每次讀取max-line行輸入交由xargs處理

  $cat 1.txt
  aaa bbb ccc ddd
  a b
  $cat 1.txt |xargs -L 2
  aaa bbb ccc ddd a b
  $cat 1.txt |xargs -L 1
  aaa bbb ccc ddd
  a b

• -l
  : 類似於-L,區別在於-l可以不指定參數,默認為1.

• -n max-args
  : 每行執行max-args個輸入,默認執行所有

  $cat 1.txt | xargs -n 2 
  aaa bbb
  ccc ddd
  a b

• -p
  : 交互模式,執行前詢問是否執行

  $cat 1.txt | xargs -p
  /bin/echo aaa bbb ccc ddd a b ?...y
  aaa bbb ccc ddd a b
  $cat 1.txt | xargs -p
  /bin/echo aaa bbb ccc ddd a b ?...n

• -r
  : 無輸入則停止執行,默認至少執行1次

  $ echo ""|xargs -t mv
  mv 
  mv: missing file operand
  Try `mv --help` for more information.
  $ echo ""|xargs -t -r mv    #直接退出

• -s max-chars
  : xargs每次執行命令的最大長度(含空格)

  $ cat 1.txt
  aaa bbb ccc ddd a b
  $ cat 1.txt |xargs -t -s 30
  /bin/echo aaa bbb ccc ddd a b 
  aaa bbb ccc ddd a b
  #length(/bin/echo aaa bbb ccc ddd a b )=30
  $cat 1.txt |xargs -t -s 14
  /bin/echo aaa 
  aaa
  /bin/echo bbb 
  bbb
  /bin/echo ccc 
  ccc
  /bin/echo ddd 
  ddd
  /bin/echo a b 
  a b
  #length(/bin/echo aaa )=14

• -t
  : 先打印執行的命令,然後執行

  $cat 1.txt | xargs -t
  /bin/echo aaa bbb ccc ddd a b
  aaa bbb ccc ddd a b

• -x
  : 當xargs執行的命令長度大於-s max-char時,停止執行

• -P max-procs
  : 修改線程數,默認為單線程.max-procs為0時,as many processes as possible

3. find和xargs

　在使用find命令的-exec選項處理匹配到的文件時，find命令將所有匹配到的文件一起傳遞給exec執行。但有些系統對能夠傳遞給exec的命令長度有限制，這樣在find命令運行幾分鐘之後，就會出現溢出錯誤。錯誤信息通常是“參數列太長”或“參數列溢出”。這就是xargs命令的用處所在，特別是與find命令一起使用。find命令把匹配到的文件 傳遞給xargs命令，而xargs命令每次只獲取一部分文件而不是全部，不像-exec選項那樣。這樣它可以先處理最先獲取的一部分文件，然後是下一 批，並如此繼續下去。
　在有些系統中，使用-exec選項會為處理每一個匹配到的文件而發起一個相應的進程，並非將匹配到的文件全部作為參數一次執行；這樣在有些情況下就會出現進程過多，系統性能下降的問題，因而效率不高；而使用xargs命令則只有一個進程。另外，在使用xargs命令時，究竟是一次獲取所有的參數，還是分批取得參數，以及每一次獲取參數的數目 都會根據該命令的選項及系統內核中相應的可調參數來確定。
　管道是把一個命令的輸出傳遞給另一個命令作為輸入，比如：command1 | command2但是command2僅僅把command1輸出的內容作為輸入參數。find . -name "install.log" -print打印出的是install.log這個字符串，如果僅僅使用管道，那麼command2能夠使用的僅僅是install.log這個字符串，不能把它當作文件來進行處理。
　當然這個command2除了xargs。xargs就是為了能夠對find搜索到的文件進行操作而編寫的。它能把管道傳來的字符串當作文件交給其後的命令執行。

4 Example

$find . -name "1.txt"  | cat
./1.txt
#顯示從管道傳來的內容，僅僅作為字符串來處理

$find . -name "1.txt" | xargs cat
aaa bbb ccc ddd
a b
#將管道傳來的內容作為文件，交給cat執行。也就是說，該命令執行的是如果存在1.txt，那麼就打印出這個文件的內容。

$find . -perm -7 -print | xargs chmod o-w
#在當前目錄下查找所有用戶具有讀、寫和執行權限的文件，並收回相應的寫權限

$ find . -type f -print | xargs file
#查找系統中的每一個普通文件，然後使用xargs命令來測試它們分別屬於哪類文件

$find ~ -name '*.log' -print0 | xargs -i -0 rm -f {}
#嘗試用rm 刪除太多的文件，你可能得到一個錯誤信息：/bin/rm Argument list too long. 用xargs 去避免這個問題

$find / -name *.jpg -type f -print | xargs tar -cvzf images.tar.gz
#查找所有的jpg 文件，並且壓縮它

$ls *.jpg | xargs -n 1 -i cp {} /external-hard-drive/directory
#拷貝所有的圖片文件到一個外部的硬盤驅動 

尾記

這裡只是最簡略的用法,目的是快速理解上手使用.如果遇到問題,請使用man xargs或者撥打10086:)