[轉載]linux sed命令詳解

簡介

sed 是一種在線編輯器，它一次處理一行內容。處理時，把當前處理的行存儲在臨時緩衝區中，稱爲「模式空間」（pattern space），接着用sed命令處理緩衝區中的內容，處理完成後，把緩衝區的內容送往屏幕。接着處理下一行，這樣不斷重複，直到文件末尾。文件內容並無 改變，除非你使用重定向存儲輸出。Sed主要用來自動編輯一個或多個文件；簡化對文件的反覆操做；編寫轉換程序等。

 

sed使用參數

[root@www ~]# sed [-nefr] [動做]
選項與參數：
-n ：使用安靜(silent)模式。在通常 sed 的用法中，全部來自 STDIN 的數據通常都會被列出到終端上。但若是加上 -n 參數後，則只有通過sed 特殊處理的那一行(或者動做)纔會被列出來。
-e ：直接在命令列模式上進行 sed 的動做編輯；
-f ：直接將 sed 的動做寫在一個文件內， -f filename 則能夠運行 filename 內的 sed 動做；
-r ：sed 的動做支持的是延伸型正規表示法的語法。(默認是基礎正規表示法語法)
-i ：直接修改讀取的文件內容，而不是輸出到終端。

動做說明： [n1[,n2]]function
n1, n2 ：不見得會存在，通常表明『選擇進行動做的行數』，舉例來講，若是個人動做是須要在 10 到 20 行之間進行的，則『 10,20[動做行爲] 』

function：
a ：新增， a 的後面能夠接字串，而這些字串會在新的一行出現(目前的下一行)～
c ：取代， c 的後面能夠接字串，這些字串能夠取代 n1,n2 之間的行！
d ：刪除，由於是刪除啊，因此 d 後面一般不接任何咚咚；
i ：插入， i 的後面能夠接字串，而這些字串會在新的一行出現(目前的上一行)；
p ：列印，亦即將某個選擇的數據印出。一般 p 會與參數 sed -n 一塊兒運行～
s ：取代，能夠直接進行取代的工做哩！一般這個 s 的動做能夠搭配正規表示法！例如 1,20s/old/new/g 就是啦！

 

以行爲單位的新增/刪除

將 /etc/passwd 的內容列出而且列印行號，同時，請將第 2~5 行刪除！

[root@www ~]# nl /etc/passwd | sed '2,5d'
1 root:x:0:0:root:/root:/bin/bash
6 sync:x:5:0:sync:/sbin:/bin/sync
7 shutdown:x:6:0:shutdown:/sbin:/sbin/shutdown
.....(後面省略).....

sed 的動做爲 '2,5d' ，那個 d 就是刪除！由於 2-5 行給他刪除了，因此顯示的數據就沒有 2-5 行羅～ 另外，注意一下，本來應該是要下達 sed -e 纔對，沒有 -e 也行啦！同時也要注意的是， sed 後面接的動做，請務必以 '' 兩個單引號括住喔！

只要刪除第 2 行

nl /etc/passwd | sed '2d' 

 

要刪除第 3 到最後一行

 nl /etc/passwd | sed '3,$d' 

 

在第二行後(亦便是加在第三行)加上『drink tea?』字樣！

[root@www ~]# nl /etc/passwd | sed '2a drink tea'
1 root:x:0:0:root:/root:/bin/bash
2 bin:x:1:1:bin:/bin:/sbin/nologin
drink tea
3 daemon:x:2:2:daemon:/sbin:/sbin/nologin
.....(後面省略).....

 

那若是是要在第二行前

 nl /etc/passwd | sed '2i drink tea' 

 

若是是要增長兩行以上，在第二行後面加入兩行字，例如『Drink tea or .....』與『drink beer?』

[root@www ~]# nl /etc/passwd | sed '2a Drink tea or ......\
> drink beer ?'
1 root:x:0:0:root:/root:/bin/bash
2 bin:x:1:1:bin:/bin:/sbin/nologin
Drink tea or ......
drink beer ?
3 daemon:x:2:2:daemon:/sbin:/sbin/nologin
.....(後面省略).....

每一行之間都必需要以反斜槓『 \ 』來進行新行的添加喔！因此，上面的例子中，咱們能夠發如今第一行的最後面就有 \ 存在。

以行爲單位的替換與顯示

將第2-5行的內容取代成爲『No 2-5 number』呢？

[root@www ~]# nl /etc/passwd | sed '2,5c No 2-5 number'
1 root:x:0:0:root:/root:/bin/bash
No 2-5 number
6 sync:x:5:0:sync:/sbin:/bin/sync
.....(後面省略).....

透過這個方法咱們就可以將數據整行取代了！

 

僅列出 /etc/passwd 文件內的第 5-7 行

[root@www ~]# nl /etc/passwd | sed -n '5,7p'
5 lp:x:4:7:lp:/var/spool/lpd:/sbin/nologin
6 sync:x:5:0:sync:/sbin:/bin/sync
7 shutdown:x:6:0:shutdown:/sbin:/sbin/shutdown

能夠透過這個 sed 的以行爲單位的顯示功能， 就可以將某一個文件內的某些行號選擇出來顯示。

 

數據的搜尋並顯示

搜索 /etc/passwd有root關鍵字的行

nl /etc/passwd | sed '/root/p'
1  root:x:0:0:root:/root:/bin/bash
1  root:x:0:0:root:/root:/bin/bash
2  daemon:x:1:1:daemon:/usr/sbin:/bin/sh
3  bin:x:2:2:bin:/bin:/bin/sh
4  sys:x:3:3:sys:/dev:/bin/sh
5  sync:x:4:65534:sync:/bin:/bin/sync
....下面忽略 

若是root找到，除了輸出全部行，還會輸出匹配行。

 

使用-n的時候將只打印包含模板的行。

nl /etc/passwd | sed -n '/root/p'
1  root:x:0:0:root:/root:/bin/bash

 

數據的搜尋並刪除

刪除/etc/passwd全部包含root的行，其餘行輸出

nl /etc/passwd | sed  '/root/d'
2  daemon:x:1:1:daemon:/usr/sbin:/bin/sh
3  bin:x:2:2:bin:/bin:/bin/sh
....下面忽略
#第一行的匹配root已經刪除了

 

 

 

數據的搜尋並執行命令

找到匹配模式eastern的行後，

搜索/etc/passwd,找到root對應的行，執行後面花括號中的一組命令，每一個命令之間用分號分隔，這裏把bash替換爲blueshell，再輸出這行：

 nl /etc/passwd | sed -n '/root/{s/bash/blueshell/;p}'
 1  root:x:0:0:root:/root:/bin/blueshell

若是隻替換/etc/passwd的第一個bash關鍵字爲blueshell，就退出

nl /etc/passwd | sed -n '/bash/{s/bash/blueshell/;p;q}'    
1  root:x:0:0:root:/root:/bin/blueshell

最後的q是退出。

 

數據的搜尋並替換

除了整行的處理模式以外， sed 還能夠用行爲單位進行部分數據的搜尋並取代。基本上 sed 的搜尋與替代的與 vi 至關的相似！他有點像這樣：

sed 's/要被取代的字串/新的字串/g'

 

先觀察原始信息，利用 /sbin/ifconfig 查詢 IP

[root@www ~]# /sbin/ifconfig eth0
eth0 Link encap:Ethernet HWaddr 00:90:CC:A6:34:84
inet addr:192.168.1.100 Bcast:192.168.1.255 Mask:255.255.255.0
inet6 addr: fe80::290:ccff:fea6:3484/64 Scope:Link
UP BROADCAST RUNNING MULTICAST MTU:1500 Metric:1
.....(如下省略).....

本機的ip是192.168.1.100。

 

將 IP 前面的部分予以刪除

[root@www ~]# /sbin/ifconfig eth0 | grep 'inet addr' | sed 's/^.*addr://g'
192.168.1.100 Bcast:192.168.1.255 Mask:255.255.255.0

接下來則是刪除後續的部分，亦即： 192.168.1.100 Bcast:192.168.1.255 Mask:255.255.255.0

將 IP 後面的部分予以刪除

[root@www ~]# /sbin/ifconfig eth0 | grep 'inet addr' | sed 's/^.*addr://g' | sed 's/Bcast.*$//g'
192.168.1.100

 

多點編輯

一條sed命令，刪除/etc/passwd第三行到末尾的數據，並把bash替換爲blueshell

nl /etc/passwd | sed -e '3,$d' -e 's/bash/blueshell/'
1  root:x:0:0:root:/root:/bin/blueshell
2  daemon:x:1:1:daemon:/usr/sbin:/bin/sh

-e表示多點編輯，第一個編輯命令刪除/etc/passwd第三行到末尾的數據，第二條命令搜索bash替換爲blueshell。

 

 

直接修改文件內容(危險動做)

sed 能夠直接修改文件的內容，沒必要使用管道命令或數據流重導向！ 不過，由於這個動做會直接修改到原始的文件，因此請你千萬不要隨便拿系統配置來測試！ 咱們仍是使用下載的 regular_express.txt 文件來測試看看吧！

利用 sed 將 regular_express.txt 內每一行結尾若爲 . 則換成 !

[root@www ~]# sed -i 's/\.$/\!/g' regular_express.txt

 

利用 sed 直接在 regular_express.txt 最後一行加入『# This is a test』

[root@www ~]# sed -i '$a # This is a test' regular_express.txt

由於 $ 表明的是最後一行，而 a 的動做是新增，所以該文件最後新增『# This is a test』！

sed 的『 -i 』選項能夠直接修改文件內容，這功能很是有幫助！舉例來講，若是你有一個 100 萬行的文件，你要在第 100 行加某些文字，此時使用 vim 可能會瘋掉！由於文件太大了！那怎辦？就利用 sed 啊！透過 sed 直接修改/取代的功能，你甚至不須要使用 vim 去修訂！

轉自：http://www.cnblogs.com/ggjucheng/archive/2013/01/13/2856901.html

SED的模式空間與緩衝區

sed命令n，N，d，D，p，P，h，H，g，G，x解析
一、sed執行模板=sed ‘模式{命令1;命令2}’ 即逐行讀入模式空間，執行命令，最後輸出打印出來
二、p打印當前模式空間全部內容，追加到默認輸出以後；P打印當前模式空間開端至\n的內容，並追加到默認輸出以前。
Sed並不對每行末尾\n進行處理，可是對N命令追加的行間\n進行處理，由於此時sed將兩行看作一行。
三、n命令
n命令簡單來講就是提早讀取下一行，覆蓋模型空間前一行，而後執行後續命令。而後再讀取新行，對新讀取的內容重頭執行sed。
例子：從aaa文件中取出偶數行
[root@localhost ~]# cat a.txt
This is 1   
This is 2   
This is 3   
This is 4   
This is 5
[root@localhost ~]# sed –n ‘n;p’ a.txt
This is 2   
This is 4   
[root@localhost ~]#
註釋：讀取This is 1，執行n命令，此時模式空間爲This is 2，執行p，打印模式空間內容This is 2，以後讀取This is 3，執行n命令，此時模式空間爲This is 4，執行p，打印模式空間內容This is 4，以後讀取This is 5，執行n命令，由於沒有了，因此退出，並放棄p命令。所以，最終打印出來的就是偶數行。
 
N命令簡單來講就是追加下一行到模式空間，同時將兩行看作一行，可是兩行之間依然含有\n換行符，而後執行後續命令。而後再讀取新行，對新讀取的內容重頭執行sed。此時，新讀取的行會覆蓋以前的行（以前的兩行已經合併爲一行）。
例子：從aaa文件中讀取奇數行
[root@localhost ~]# sed –n ‘N;P’ a.txt   -----由於讀取第5行時，執行N，發現沒有第6行，不知足，就退出，放棄P命令
This is 1   
This is 3   
[root@localhost ~]# sed –n ‘$!N;P’ a.txt   
This is 1   
This is 3   
This is 5
[root@localhost ~]#
註釋中1表明This is 1   2表明This is 2  以此類推
註釋：讀取1，$!條件知足（不是尾行），執行N命令，得出1\n2，執行P，打印得1，讀取3，$!條件知足（不是尾行），執行N命令，得出3\n4，執行P，打印得3，讀取5，$!條件不知足，跳過N，執行P，打印得5


四、d命令
d命令是刪除當前模式空間內容（再也不傳至標準輸出），並放棄以後的命令，並對新讀取的內容，重頭執行sed。
[root@localhost ~]# sed ‘n;d’ a.txt 
This is 1   
This is 3   
This is 5
[root@localhost ~]#
註釋：讀取1，執行n，得出2，執行d，刪除2，得空，以此類推，讀取3，執行n，得出4，執行d，刪除4，得空，可是讀取5時，由於n沒法執行，因此d不執行。因無-n參數，故輸出1\n3\n5


D命令是刪除當前模式空間開端至\n的內容（不在傳至標準輸出），放棄以後的命令，可是對剩餘模式空間從新執行sed。
Sed ‘N;D’ aaa           
This is 5  
註釋：讀取1，執行N，得出1\n2，執行D，得出2，執行N，得出2\n3，執行D，得出3，依此類推，得出5，執行N，條件失敗退出，因無-n參數，故輸出5


五、y命令：對以前匹配的字符逐個替換
[root@localhost ~]# awk ‘{print $0」h」}’ a.txt | sed ‘y/his/HIS/’
THIS IS 1H
THIS IS 2H
THIS IS 3H
THIS IS 4H
THIS IS 5H
[root@localhost ~]#
此外，若是須要對某個字符串進行大小寫轉換，則可以使用以下方法    
sed ‘s/\b[a-z]\b/\u&/g’ ddd   
This is A and A is 1   
This is B and B is 2   
This is C and C is 3   
This is D and D is 4   
This is E and E is 5  




六、h命令，H命令，g命令，G命令
h命令是將當前模式空間中內容覆蓋至緩存區，H命令是將當前模式空間中的內容追加至緩存區
g命令是將當前緩存區中內容覆蓋至模式空間，G命令是將當前緩存區中的內容追加至模式空間


[root@wmsvmpc ~]# sed –e ‘/101/h’ –e ‘$G’ cs1.txt 
PBCSPOFT0101    6
PBCSPOFT0102    0
PBCSPOFT0103    8
PB\CSPOFT0104    0
PBCSPOFT0101    6
[root@wmsvmpc ~]#
在sed處理文件的時候，每一行都被保存在一個叫模式空間的臨時緩衝區中，除非行被刪除或者輸出被取消，不然全部被處理的行都將打印在屏幕上。接着模式空間被清空，並存入新的一行等待處理。
在上面的例子裏，匹配test的行被找到後，將存入模式空間，h命令將其複製並存入一個稱爲保持緩存區的特殊緩衝區內。第二條語句的意思是，當到達最後一行後，G命令取出保持緩衝區的行，而後把它放回模式空間中，而後被打印（也就末尾）。
[root@wmsvmpc ~]# sed –e ‘/101/h’ –e ‘/102/G’ cs1.txt   ---追加到包含102的行的下一行
PBCSPOFT0101    6
PBCSPOFT0102    0
PBCSPOFT0101    6
PBCSPOFT0103    8
PB\CSPOFT0104    0




將ddd文件中數字和字母互換，並將字母大寫 
cat ddd.sed
h  
{  
s/.*is \(.*\) and .*/\1/  
y/abcde/ABCDE/
G  
s/\(.*\)\n\(.*is \).*\(and \).*\(is \)\(.*\)/\2\5 \3\5 \4\1/  
}  
                                           
sed –f ddd.sed ddd  
This is 1 and 1 is A  
This is 2 and 2 is B  
This is 3 and 3 is C  
This is 4 and 4 is D  
This is 5 and 5 is E  
註釋：讀取1，執行h，複製到緩存區，執行s，模式空間獲得匹配到的字母a，而後執行y，將a轉成A，執行G，追加緩存區內容到模式空間，得
A\nThis is a and a is 1；執行s，從新排列，得出This is 1 and 1 is A；以此類推，得出結果。
這裏須要注意的是匹配的內容中，空格必定要處理好，空格處理不對，會形成第二次s匹配錯誤，沒法執行從新排列或排列錯誤
 


七、x命令
x命令是將當前緩存區和模式空間內容互換
[root@wmsvmpc ~]# sed –e ‘/101/h’ –e ‘/102/x’ cs1.txt   ---互換模式空間和保持緩衝區的內容。也就是把包含101與102的行互換。應該是替換，待百度
PBCSPOFT0101    6
PBCSPOFT0101    6
PBCSPOFT0103    8
PB\CSPOFT0104    0


[root@wmsvmpc ~]#  echo –e 「a\nb\nc\nd\n」|sed –nr ‘H;${x;s/\n//g;p}’
abcd
r：use extended regular expressions in the script，使用功能更強大的正則表達式。
${} 表示處理到文件最後一行時執行{}中的命令，x把以前存入緩存區的數據按先入先出的順序放入模式空間，而後作替換，最後打印

轉自：http://blog.itpub.net/25960404/viewspace-1818860/