【Sed簡介】
sed是一個文件處理工具,本身是一個管道命令,主要用來自動編輯一個或多個文件,簡化對文件的反復操作,編寫轉換程序等。sed以行為單位,一次處理一行內容,處理時,把當前處理的行存儲在臨時緩沖區(模式空間),接着用sed命令處理緩沖區里的內容,處理完成后,把緩沖區里的內容送到屏幕,然后接着處理下一行,這樣不斷重復,直到文件末尾。其實文件內容並沒有改變,除非使用了重定向輸出。
【定位】
用數字來定位所編輯的行,用逗號分隔的行數表示起止范圍,比如1,5表示1,2,3,4,5行,美元符號$表示最后一行。范圍可以通過數據、正則表達式或二者結合的方式確定。
【使用】
調用sed命令有兩種形式:
sed [options] 'command' file(s)
sed [options] -f scriptfile file(s)
注:sed腳本是一個sed的命令清單,啟動sed時以-f選項引導腳本文件名。sed腳本中,命令的末尾不能有任何空白或文本,如果在一行中有多個命令,要用分號分隔。以#開頭的為注釋行,且不能跨行。
常用選項:
-n 使用silent模式。在一般sed用法中,所有來自STDIN的資料一般都會被列出到屏幕上,但加上-n參數后,則只有經過sed特殊處理的那行才會被列出。
-e 直接在指令列模式上進行sed的動作編輯。
-f 直接將sed的動作寫在一個文件里,-f scriptfile則可以執行scriptfile內的sed動作。
-r sed的動作支援的是延伸型正規表示法的語法。
-i 直接修改讀取的文件內容,而不是由屏幕輸出。
常用命令:
a 在當前行后面加入一行文本。
c 取代,c的后面可以接字符串,這些字符串可以取代n1,n2之間的行。
d 刪除。D是刪除模板塊的第一行。
i 插入,i后面可以接字符串,而且這些字符串會在新的一行出現(目前的上一行)。
p 打印。通常與-n一起用。P是打印模板塊的第一行。
s 取代,可以直接進行取代的工作,可以搭配正則表達式。
= 打印當前行號。
! 表示后面的命令對所有沒有選定的行發生作用。
r file 從file中讀行。
w file 寫並追加模板塊到file末尾。W file是寫並追加模板塊的第一行到file末尾。
s /re/string 用string替換正則表達式re。
n 讀取下一個輸入行,用下一個命令處理新的行。
替換標記:
g 行內全面替換。
p 打印行。
w 把行寫入一個文件。
x 互換模板塊中的文本和緩沖區中的文本。
y 把一個字符翻譯為另外的字符。(不用於正則表達式。)
元字符集:
^ 錨定行的開始。如/^some/匹配所有以some開頭的行。
$ 錨定行的結束。如/some$/匹配所有以some結尾的行。
. 匹配一個非換行符的字符。如/s.d/匹配s后接任意一個字符,然后是d。
* 匹配零或多個字符。如/*some/匹配所有模板是一個或多個空格后緊跟some的行。
[] 匹配一個指定范圍內的字符。如/[Ss]ome/匹配Some和some。
[^] 匹配一個不在指定范圍內的字符。如/[^A-GO-T]es/匹配不包含A-G和O-T的一個字母開頭,緊跟es的行。
& 保存搜索字符用來替換其它字符。如s/love/**&**/,love這成**love**。
\(..\) 保存匹配的字符,如s/\(love\)able/\1rs,loveable被替換成lovers。
\< 錨定單詞的開始。如/\<love/匹配包含以love開頭的單詞的行。
\> 錨定單詞的結束。如/able\>/匹配包含以able結尾的單詞的行。
x\{m\} 重復字符x,m次。如/A\{5\}/匹配包含5個A的行。
x\{m,n\} 重復字符x至少m次,至多n次。如/A\{5,10\}/匹配5至10個A的行。
【例子】
顯示:n命令
sed -n '/\$/p' filename 查詢包括關鍵字$所在的所有行(使用反斜線屏蔽特殊含義)。
刪除:d命令
sed '2d' filename 刪除filename文件的第2行
sed '$d' filename 刪除filename文件的最后一行
sed '2,$d' filename 刪除filename文件的第2行到末尾所有行
sed '/some/'d filename 刪除filename文件中所有包含some的行
增加命令:a命令
sed '1,3a hello world' filename 在第一行到第三行后面增加字符串hello world。
sed '1a hello\n world' filename 在第一行后增加多行,使用換行符\n。
sed '/^some/a\\hello' filename hello被追加到以some開頭的行后面。sed要求命令a后面有一個反斜杠。
插入命令:i命令
sed -i '$a bye' filename 在filename中最后一行直接輸入bye。
sed '/some/i\\a new line' filename 如果some被匹配,則把反斜杠后面的文本插入到匹配行的前面。
代替:c命令
sed '1,2c hello' filename 將第一行到第二行代替為hello
替換:s命令
sed -n '/hello/p' filenme | sed 's/hello/hi/g' 將filename中的hello替換為hi。
sed -n '/hello/p' filename | sed 's/hello//g' 將filename中的hello刪除。
sed 's/some/someone/g' filename 在整行范圍內把some替換為someone。如果不加g標識,則只有每行第一個匹配的some被替換成someone
sed -n 's/^some/someone/p' filename -n選項和p標識一起使用,表示只打印那些發生替換的行,也就是說,如果某行開頭的some被替換成someone,就打印該行。sed -n 's/^some/someone/gp' filename是如果某行的some被替換成someone,就打印該行。
sed 's/^192.168.0.1/&localhost/' filename 所有以192.168.0.1開頭的行都會被替換成它自己加localhost,變成192.168.0.1localhost。
sed -n 's/\(love\)able/\1rs/p' filename love被標記為1,所有loveable會被替換成lovers,而且替換的行會被打印出來。
sed 's#10#100#g' filename 不論什么字符,緊跟着s命令的都被認為是新的分隔符,所以,#在這里是分隔符,代替了默認的/分隔符。表示把所有10替換成100。
選定的范圍:逗號
sed -n '/one/,/two/p' filename 所有在模板one和two所確定的范圍內的行都被打印。
sed -n '5,/^some/p' filename 打印從第5行開始到第一個包含以some開頭的行之間的所有行。
sed '/one/,/two/s/$/some/' filename 對於模板one和two之間的行,每行的末尾用字符串some替換。
多點編輯:e命令
sed -e '1,5d' -e 's/some/someone/' filename -e選項允許在同一行里執行多條命令。第一條命令刪除1至5行,第二條命令用some替換someone。命令的執行順序對結果有影響。如果兩個命令都是替換命令,那么第一個替換命令將影響第二個替換命令的結果。
sed --expression='s/some/someone/' --expression='/love/d' filename 一個比-e更好的命令是--expression,它能給sed表達式賦值。
從文件讀入:r命令
sed '/some/r file' filename file里的內容被讀進來,顯示在與some匹配的行后面,如果匹配多行,則file的內容將顯示在所有匹配行的下面。
寫入文件:w命令
sed -n '/some/w file' filename 在filename中所有包含some的行都被寫入file里,並且會覆蓋file的內容。
下一個:n命令
sed '/some/{ n; s/aa/bb/; }' filename 如果some被匹配,則移動到匹配行的下一行,把這一行的aa替換成bb,並打印該行,然后繼續。
變形:y命令
sed '1,10y/abc/ABC/' filename 把1到10行內所有的abc轉換為大寫。注意,正則表達式元字符不能使用這個命令。
退出:q命令
sed '10q' filename 打印完第10行后退出sed。
保持和獲取:h命令和G命令
sed -e '/some/h' -e '$G' filename 在sed處理文件的時候,每一行都被保存在一個叫做模式空間的臨時緩沖區中,除非行被刪除或者輸出被取消,否則所有被處理的行都將打印在屏幕上。接着模式空間被清空,並存入新的一行等待處理。在這個例子里,匹配some的行被找到后,將存入模式空間,h命令將其復制並存入一個成為保持緩存區的特殊緩沖區內。第二條語句的意思是,當到達最后一行后,G命令去除保持緩存區的行,然后把它放回模式空間中,且追加到現在已經存在於模式空間中的行的末尾。在這個例子中就是追加到最后一行。簡單來說,任何包含some的行都被復制並追加到該文件的末尾。
保持和互換:h命令和x命令
sed -e '/some/h' -e '/someone/x' filename 互換模式空間和保持緩沖區內容。也就是把包含some和someone的行互換。
【注意】
在sed命令里引用shell變量要使用雙引號。
例:根據name變量的內容來刪除named.conf文件中zone段的腳本
name='zone\ "localhost"'
sed "/$name/,/}:/d" named.conf
【參考資料】
SED單行腳本快速參考 http://sed.sourceforge.net/sed1line_zh-CN.html