1、sed的概念:正則表達式
sed意爲流編輯器(Stream Editor),在Shell腳本和Makefile中做爲過濾器使用很是廣泛,也就是 把前一個程序的輸出引入sed的輸入,通過一系列編輯命令轉換爲另外一種格式輸出。sed和vi都源於早期UNIX的ed工具,因此不少sed命令和vi的末行命令是相同的。
sed命令行的基本格式爲:
sed option 'script' file1 file2 ...
sed option -f scriptfile file1 file2 ...
sed處理的文件既能夠由標準輸入重定向獲得,也能夠當命令行參數傳入,命令行參數能夠一次傳入多個文件,sed會依次處理。 sed的編輯命令能夠直接當命令行參數傳入,也能夠寫成一個腳本文件而後用-f參數指定,編輯命令的格式爲
/pattern/action
其中pattern是正則表達式,action是編輯操做。sed程序一行一行讀出待處理文件,若是某一行與pattern匹配,則執相應的action,若是一條命令沒有pattern只有action,這個action將做用於待處理文件的每一行。
sed是一種在線編輯器,它一次處理一行內容。處理時,把當前處理的行存儲在臨時緩衝區中,稱爲「模式空間」( pattern space),接着sed命令處理緩衝區中的內容,處理完成後,把緩衝區的內容送往屏幕。接着處理下一行,這樣不斷重複,直到文件末尾。文件內容並無改變,除非你使用重定向存儲輸出。sed主要用來自動編輯一個或多個文件:簡化對文件的反覆操做。app
2、命令和選項:編輯器
sed命令告訴sed如何處理由地址指定的各輸入行,若是沒有指定地址則處理全部的輸入行。ide
命令spa
a\ : 在當前行後添加一行或多行。多行時除最後一行外,每行末尾需用「\」續行命令行
c\ :用此符號後的新文本替換當前行中的文本。多行時除最後一行外,每行末尾需用」\"續行orm
i\ :在當前行以前插入文本。多行時除最後一行外,每行末尾需用」\"續行 d刪除行blog
h : 把模式空間的內容複製到暫存緩衝區ip
H : 把模式空間的內容追加到暫存緩衝區v8
g : 把暫存緩衝區的內容複製到模式空間,覆蓋原有的內容
G: 把暫存緩衝區的內容追加到模式空間裏,追加在原有內容的後面
l : 列出非打印字符
p : 打印行
n : 讀入下一輸入行,並從下一條命令而不是第一條命令開始對其的處理
q : 結束或退出sed
r : 從文件中讀取輸入行
! : 對所選行之外的全部行應用命令
s : 用一個字符串替換另外一個
g : 在行內進行全局替換
w : 將所選的行寫入文件
x : 交換暫存緩衝區與模式空間的內容
y : 將字符替換爲另外一字符(不能對正則表達式使用y命令)
選項
-e : 進多項編輯,即對輸入行應用多條sed命令時使用
-n : 取消默認的輸出
-f :指定sed腳本的文件名
8. 退出狀態
sed不像grep樣,無論是否找到指定的模式,它的退出狀態都是0。只有當命令存在語法錯誤時, sed的退出狀態纔不是0。
sed在正常狀況下,將處理的行讀入模式空間( pattern space),腳本中的「sedcommand( sed命令) 」就一條接着一條進行處理,直到腳本執完畢。而後該行被輸出,模式( pattern space)被清空;接着,再重複執剛纔的動做,件中的新的一行被讀入,直到文件處理完畢。
通常狀況下,數據的處理只使用模式空間( pattern space),按照如上的邏輯便可完成主要任務。可是某些時候,使用經過使用保持空間( hold space),還能夠帶來意想不到的效果。
模式空間:能夠想成工程裏面的流水線,數據之間在它上面進行處理。
保持空間:能夠想象成倉庫,咱們在進行數據處理的時候,做爲數據的暫存區域。
正常狀況下,若是不顯示使用某些高級命令,保持空間不會使用到!
sed命令:
+ g: [address[,address]]g 將hold space中的內容拷貝到pattern space中,原來pattern space裏的內容清除
+ G: [address[,address]]G 將hold space中的內容append到pattern
space\n後
+ h: [address[,address]]h 將pattern space中的內容拷貝到hold space中,原來的hold space裏的內容被清除
+ H: [address[,address]]H 將pattern space中的內容append到holdspace\n後
+ d: [address[,address]]d 刪除pattern中的全部行,並讀入下一新行到pattern中
+ D: [address[,address]]D 刪除multiline pattern中的第一行,不讀入下一行
+ x: 交換保持空間和模式空間的內容
有以下例子:
1. 給每行結尾添加空行
2. sed模擬出tac的功能(倒序輸出)
1!G第1不執「G」命令,從第2行開始執。 $!d,最後一行不刪除(保留最後1行)
3. 追加匹配行到文件結尾
4.行列轉化
H表把pattern space 的內容追加到hold space中去, H能夠帶一個地址,這裏用的是$,表到文件的末尾,而後用x將之取到pattern space中,把\n替換成空格再打印便可。
5.求1-100的和
7.再求1-100的和
:a表標籤a, ba表跳轉到a標籤, $表最後一行,!表示不作後續操做,因此, $!ba表示最後一行不跳轉到a標籤,結束這次操做。