sed命令

sed（Stream EDitor, 行編輯器）命令

@(0001學習博客)

sed也是一種語言，是一種行編輯器。

sed是一種流編輯器，它一次處理一行內容。處理時，把當前處理的行存儲在臨時緩衝區中，稱爲「模式空間」（pattern space），接着用sed命令處理緩衝區中的內容，處理完成後，把緩衝區的內容送往屏幕。而後讀入下行，執行下一個循環。若是沒有使諸如‘D’的特殊命令，那會在兩個循環之間清空模式空間，但不會清空保留空間。這樣不斷重複，直到文件末尾。文件內容並無改變，除非你使用重定向存儲輸出。

功能：主要用來自動編輯一個或多個文件,簡化對文件的反覆操做,編寫轉換程序等

參考文檔：http://www.gnu.org/software/sed/manual/sed.html

1.sed地址命令

sed [option]... 'script' inputfile...
# option:
    -n：不輸出模式空間內容到屏幕，即不自動打印。若是不加-n，那麼被匹配到的行會顯示2次。
    -e: 多點編輯
        sed -n -e '2p'  -e  '6p'  /etc/passwd   表示顯示第二行和第6行
    -f：/PATH/SCRIPT_FILE: 從指定文件中讀取編輯腳本
    -r: 支持使用擴展正則表達式
    -i.bak: 備份文件並原處編輯，示例以下：
        -i，對文件進行直接編輯
        -i.bak 原文件自動生成一個.bak 的備份文件，同時對原文件修改
        sed  -i.bak '2,5atesti' /data/ff
        sed -i.bak "/alias/aalias cdnet='cd /etc/sysconfig/network-scripts/'"   .bashrc  注意""與''的運用

# script:'地址命令'
# 地址界定：
    不給地址，全對全文進行處理；
    單地址：
        #: 指定的行；$：最後一行；/pattern/：被此處模式所可以匹配到的每一行（使用正則表達式）
    地址範圍：
        #,#  
        #,+#
        /pat1/,/pat2/   從第一次匹配到pat1開始到第一次匹配到pat2結束
        #,/pat1/    從第#行開始到匹配到pat1結束
    步進：
        1~2 奇數行，從第一行開始，每次遞增2行  
        2~2 偶數行，從第二行開始，每次遞增2行

# 編輯命令：
    d: 刪除模式空間匹配的行，並當即啓用下一輪循環
    p：打印當前模式空間內容，追加到默認輸出以後
    a [\]text：在指定行後新開一行追加文本，示例以下：
        sed '2,5abbb' /data/ff  在第2-5行後添加新行bbb
        sed '/\<sst\>/asunsongtai' /etc/passwd  在sst這一行後添加sunsongtai
        sed -i.bak "/alias/aalias cdnet='cd /etc/sysconfig/network-scripts/'"   .bashrc  注意""與''的運用
            注意：這些操做並無真正在文件中修改，一切都是在內存中，要想真正修改要加-i選項
    支持使用\n實現多行追加
    i [\]text：在行前面插入文本
    c [\]text：替換行爲單行或多行文本
    w /path/somefile: 保存模式匹配的行至指定文件
    r /path/somefile：讀取指定文件的文本至模式空間中，匹配到的行後
    =: 爲模式空間中的行打印行號
    !:模式空間中匹配行取反處理
        sed '2!d' /etc/passwd   表示除了第二行全刪除
        sed -n '/root/!p'  /etc/passwd   顯示不被匹配帶root的行

2.sed工具

s///：查找替換,支持使用其它分隔符，也能夠換成s@@@，s###

• 替換標記：
  g: 行內全局替換
  p: 顯示替換成功的行
  w /PATH/TO/SOMEFILE：將替換成功的行保存至文件中

# 示例：
sed  's/root/rooter/g'  /etc/passwd  表示文件內全局搜索root並用rooter替換
sed -r 's/(root)/woshi\1/g' /etc/passwd  支持擴展正則表達式，全局替換
sed -i.bak -r 's/(root)/woshi\1/g'  /etc/passwd   

sed  -r  '/GRUB_CMDLINE_LINUX/s/(quiet)/\1 xyz/' /etc/default/grub  或
sed -r 's/(GRUB_CMDLINE_LINUX.*)"$/\1 xyz"/' /etc/default/grub

ifconfig ens33| sed -n '2p' | sed  -r -e 's/.*inet //' -e 's/ netmask.*//'  只留下ip地址，或者
ifconfig | sed -n '2p' | sed -r 's/.*inet (.*)netmask.*/\1/'   或者
ifconfig | sed -r '2!d;s/.*inet (.*)netmask.*/\1/'  

echo /etc/sysconfig/network-scripts/ifcfg-ens33  | sed  -r 's@(.*/)([^/].*/?$)@\1@'  取路徑名
echo /etc/sysconfig/network-scripts/ifcfg-ens33  | sed  -r 's@(.*/)([^/].*/?$)@\2@'  取基名

3.高級編輯工具

模式空間（pattern space）：當前處理的行所存儲的臨時緩衝區；
保持空間

P：打印模式空間開端至\n內容，並追加到默認輸出以前
h: 把模式空間中的內容覆蓋至保持空間中
H：把模式空間中的內容追加至保持空間中
g: 從保持空間取出數據覆蓋至模式空間
G：從保持空間取出內容追加至模式空間
x: 把模式空間中的內容與保持空間中的內容進行互換
n: 讀取匹配到的行的下一行覆蓋至模式空間
N：讀取匹配到的行的下一行追加至模式空間
d: 刪除模式空間中的行
D：若是模式空間包含換行符，則刪除直到第一個換行符的模式空間中的文本，並不會讀取新的輸入行，而使用合成的模式空間從新啓動循環。若是模式空間不包含換行符，則會像發出d命令那樣啓動正常的新循環

示例：
n: 讀取匹配到的行的下一行覆蓋至模式空間
seq 1 10 | sed -n 'n;p'
2
4
6
8
10

sed -n 'n;p' FILE    # 顯示文件的偶數行
sed '1!G;h;$!d' FILE   # 倒敘顯示行，相似tac
sed 'N;D' FILE         # 只留最後一行
sed '$!N;$!D' FILE     # 只留最後兩行
sed '$!d' FILE
sed ‘G’ FILE
sed ‘g’ FILE
sed ‘/^$/d;G’ FILE
sed 'n;d' FILE
sed -n '1!G;h;$p' FILE

4.練習題

一、刪除centos7系統/etc/grub2.cfg文件中全部以空白開頭的行行首的空白字符
sed -r 's/^[[:space:]]+(.*)/\1/g' /etc/grub2.cfg

注意：
sed -r 's/^[ ]+(.*)/\1/g' /etc/grub2.cfg 沒法篩選出用tab的空格，因此要用[[:space:]]

二、刪除/etc/fstab文件中全部以#開頭，後面至少跟一個空白字符的行的行首的#和空白字符
sed -r 's/(^#[[:space:]]+)(.*)/\2/g' /etc/fstab

三、在centos6系統/root/install.log每一行行首增長#號
#sed -r 's/(.*)/#\1/g' /root/install.log

四、在/etc/fstab文件中不以#開頭的行的行首增長#號
sed -r 's/(^[^#].*)/#\1/g' /etc/fstab

五、處理/etc/fstab路徑,使用sed命令取出其目錄名和基名

echo /etc/fstab| sed -r 's@(/.*/)(.*$)@\1@g' 取目錄名
echo /etc/fstab| sed -r 's@(/.*/)(.*$)@\2@g' 取基名

六、利用sed 取出ifconfig命令中本機的IPv4地址
ifconfig | sed -n 2p | sed -r 's/(^[[:space:]]+inet )(.*)(netmask.*)/\2/'

七、統計centos安裝光盤中Package目錄下的全部rpm文件的以.分隔倒數第二個字段的重複次數

sed -r  's@(.*)(\..*\.rpm$)@\2@g'  /data/filerpm   | cut -d. -f2 | sort | uniq -c 
ls *.rpm| rev | cut -d. -f2 | rev | sort | uniq -c    
ls /media/CentOS_6.9_Final/Packages/ |  sed -r 's@.*\.(.*).rpm$@\1@g'  | sort | uniq -c
ls | grep -o "[^.]*\.rpm$"  | cut -d. -f1 |sort| uniq -c

八、統計/etc/init.d/functions文件中每一個單詞的出現次數，並排序（用grep和sed兩種方法分別實現）
grep -E -o "\<[[:alnum:]]+\>" /etc/init.d/functions |sort |uniq -c | sort -nr

九、將文本文件的n和n+1行合併爲一行，n爲奇數行
seq 1 10 | sed 'N;s/\n/ /'