sed是stream editor的簡稱,也就是流編輯器。它一次處理一行內容,處理時,把當前處理的行存儲在臨時緩沖區中,稱為“模式空間”(pattern space),接著用sed命令處理緩沖區中的內容,處理完成後,把緩沖區的內容送往屏幕。接著處理下一行,這樣不斷重復,直到文件末尾。文件內容並沒有 改變,除非你使用重定向存儲輸出。
sed命令的使用規則是這樣的:
sed[option]'command' input_file
其中option是可選的,常用的option有如下幾種:
-f filename
則可以執行filename內的sed命令;-i 直接修改讀取的文件內容,而不是由屏幕輸出。
常用的命令有以下幾種:
a \:追加行(append), a \的後面跟上字符串s(多行字符串可以用\n分隔),則會在當前選擇的行的後面都加上字符串s;
1,2s/old/new/g
,將old字符串替換成new字符串
假設有一個本地文件test.txt,文件內容如下:
[qifuguang@winwill~]$ cattest.txt
thisis first line
thisis second line
thisis third line
thisis fourth line
this fifth line
happy everyday
end
本節將使用該文件詳細演示每一個命令的用法。
[qifuguang@winwill~]$ sed'1a \add one'test.txt
thisis first line
add one
thisis second line
thisis third line
thisis fourth line
thisis fifth line
happy everyday
end
本例命令部分中的1表示第一行,同樣的第二行寫成2,第一行到第三行寫成1,3
,用$
表示最後一行,比如2,$
表示第二行到最後一行中間所有的行(包含第二行和最後一行)。
本例的作用是在第一行之後增加字符串”add one”,從輸出可以看到具體效果。
[qifuguang@winwill~]$ sed'1,$a \add one'test.txt
thisis first line
add one
thisis second line
add one
thisis third line
add one
thisis fourth line
add one
thisis fifth line
add one
happy everyday
add one
end
add one
本例表示在第一行和最後一行所有的行後面都加上”add one”字符串,從輸出可以看到效果。
[qifuguang@winwill~]$ sed'/first/a \add one'test.txt
thisis first line
add one
thisis second line
thisis third line
thisis fourth line
thisis fifth line
happy everyday
end
本例表示在包含”first”字符串的行的後面加上字符串”add one”,從輸出可以看到第一行包含first,所以第一行之後增加了”add one”
[qifuguang@winwill~]$ sed'/^ha.*day$/a \add one'test.txt
thisis first line
thisis second line
thisis third line
thisis fourth line
thisis fifth line
happy everyday
add one
end
本例使用正則表達式匹配行,^ha.*day$
表示以ha開頭,以day結尾的行,則可以匹配到文件的”happy everyday”這樣,所以在該行後面增加了”add one”字符串。
i命令使用方法和a命令一樣的,只不過是在匹配的行的前面插入字符串,所以直接將上面a命令的示例的a替換成i即可,在此就不啰嗦了。
[qifuguang@winwill~]$ sed'$c \add one'test.txt
thisis first line
thisis second line
thisis third line
thisis fourth line
thisis fifth line
happy everyday
add one
本例表示將最後一行替換成字符串”add one”,從輸出可以看到效果。
[qifuguang@winwill~]$ sed'4,$c \add one'test.txt
thisis first line
thisis second line
thisis third line
add one
本例將第四行到最後一行的內容替換成字符串”add one”。
[qifuguang@winwill~]$ sed'/^ha.*day$/c \replace line'test.txt
thisis first line
thisis second line
thisis third line
thisis fourth line
thisis fifth line
replace line
end
本例將以ha開頭,以day結尾的行替換成”replace line”。
[qifuguang@winwill~]$ sed'/^ha.*day$/d'test.txt
thisis first line
thisis second line
thisis third line
thisis fourth line
thisis fifth line
end
本例刪除以ha開頭,以day結尾的行。
[qifuguang@winwill~]$ sed'4,$d'test.txt
thisis first line
thisis second line
thisis third line
本例刪除第四行到最後一行中的內容。
[qifuguang@winwill~]$ sed-n '4,$p'test.txt
thisis fourth line
thisis fifth line
happy everyday
end
本例在屏幕上打印第四行到最後一行的內容,p命令一般和-n選項一起使用。
[qifuguang@winwill~]$ sed-n '/^ha.*day$/p'test.txt
happy everyday
本例打印以ha開始,以day結尾的行。
實際運用中s命令式最常使用到的。
[qifuguang@winwill~]$ sed's/line/text/g'test.txt
thisis first text
thisis second text
thisis third text
thisis fourth text
thisis fifth text
happy everyday
end
本例將文件中的所有line替換成text,最後的g是global的意思,也就是全局替換,如果不加g,則只會替換本行的第一個line。
[qifuguang@winwill~]$ sed'/^ha.*day$/s/happy/very happy/g'test.txt
thisis first line
thisis second line
thisis third line
thisis fourth line
thisis fifth line
very happy everyday
end
本例首先匹配以ha開始,以day結尾的行,本例中匹配到的行是”happy everyday”這樣,然後再將該行中的happy替換成very happy。
[qifuguang@winwill~]$ sed's/\(.*\)line$/\1/g'test.txt
thisis first
thisis second
thisis third
thisis fourth
thisis fifth
happy everyday
end
這個例子有點復雜,先分解一下。首先s命令的模式是s/old/new/g
這樣的,所以本例的old部分即\(.*\)line$
,sed命令中使用\(\)
包裹的內容表示正則表達式的第n部分,序號從1開始計算,本例中只有一個\(\)
所以\(.*\)
表示正則表達式的第一部分,這部分匹配任意字符串,所以\(.*\)line$
匹配的就是以line結尾的任何行。然後將匹配到的行替換成正則表達式的第一部分(本例中相當於刪除line部分),使用\1
表示匹配到的第一部分,同樣\2
表示第二部分,\3
表示第三部分,可以依次這樣引用。比如下面的例子:
[qifuguang@winwill~]$ sed's/\(.*\)is\(.*\)line/\1\2/g'test.txt
this first
this second
this third
this fourth
this fifth
happy everyday
end
正則表達式中is
兩邊的部分可以用\1
和\2
表示,該例子的作用其實就是刪除中間部分的is。
在sed命令中引入shell變量 http://www.linuxidc.com/Linux/2014-03/97896.htm
Linux下Shell編程——sed命令基本用法 http://www.linuxidc.com/Linux/2013-06/85526.htm
Unix文本處理工具之sed http://www.linuxidc.com/Linux/2013-08/89315.htm
sed 高級用法 http://www.linuxidc.com/Linux/2014-09/106961.htm
sed命令詳解與示例 http://www.linuxidc.com/Linux/2014-11/109325.htm
Linux正則表達式sed 詳述 http://www.linuxidc.com/Linux/2015-04/116309.htm
Linux文本處理工具之sed http://www.linuxidc.com/Linux/2015-01/111436.htm