平常的linux系統管理工做中必不可少的就是shell腳本,若是不會寫shell腳本,那麼你就不算一個合格的管理員。目前不少單位在招聘linux系統管理員時,shell腳本的編寫是必考的項目。有的單位甚至用shell腳本的編寫能力來衡量這個linux系統管理員的經驗是否豐富。筆者講這些的目的只有一個,那就是讓你認真對待shell腳本,從一開始就要把基礎知識掌握牢固,而後要不斷的練習,只要你shell腳本寫的好,相信你的linux求職路就會輕鬆的多。筆者在這一章中並不會多麼詳細的介紹shell腳本,而只是帶你進入shell腳本的世界,若是你很感興趣那麼請到網上下載相關的資料或者到書店購買相關書籍吧。linux
在學習shell 腳本以前,須要你瞭解不少關於shell的知識,這些知識是編寫shell腳本的基礎,因此但願你可以熟練的掌握。正則表達式
【什麼是shell】shell
簡單點理解,就是系統跟計算機硬件交互時使用的中間介質,它只是系統的一個工具。實際上,在shell和計算機硬件之間還有一層東西那就是系統內核了。打個比方,若是把計算機硬件比做一我的的軀體,而系統內核則是人的大腦,至於shell,把它比做人的五官彷佛更加貼切些。回到計算機上來,用戶直接面對的不是計算機硬件而是shell,用戶把指令告訴shell,而後shell再傳輸給系統內核,接着內核再去支配計算機硬件去執行各類操做。bash
筆者接觸的linux發佈版本(Redhat/CentOS)系統默認安裝的shell叫作bash,即Bourne Again Shell,它是sh(Bourne Shell)的加強版本。Bourn Shell 是最先行起來的一個shell,創始人叫Steven Bourne,爲了記念他因此叫作Bourn Shell,檢稱sh。那麼這個bash有什麼特色呢?less
1)記錄命令歷史工具
咱們敲過的命令,linux是會有記錄的,預設能夠記錄1000條歷史命令。這些命令保存在用戶的家目錄中的.bash_history文件中。有一點須要你知道的是,只有當用戶正常退出當前shell時,在當前shell中運行的命令纔會保存至.bash_history文件中。學習
與命令歷史有關的有一個有意思的字符那就是」!」了。經常使用的有這麼幾個應用:(1)!! (連續兩個」!」),表示執行上一條指令;(2)!n(這裏的n是數字),表示執行命令歷史中第n條指令,例如」!100」表示執行命令歷史中第100個命令;(3)!字符串(字符串大於等於1),例如!ta,表示執行命令歷史中最近一次以ta爲開頭的指令。spa
2)指令和文件名補全排序
在本教程最開始筆者就介紹過這個功能了,記得嗎?對了就是按tab鍵,它能夠幫你補全一個指令,也能夠幫你補全一個路徑或者一個文件名。連續按兩次tab鍵,系統則會把全部的指令或者文件名都列出來。教程
3)別名
前面也出現過alias的介紹,這個就是bash所特有的功能之一了。咱們能夠經過alias把一個經常使用的而且很長的指令別名一個簡潔易記的指令。若是不想用了,還能夠用unalias解除別名功能。直接敲alias會看到目前系統預設的alias :
看到了吧,系統預設的alias指令也就這幾個而已,你也能夠自定義你想要的指令別名。alias語法很簡單,alias [命令別名]=[’具體的命令’]。
4)通配符
在bash下,可使用*來匹配零個或多個字符,而用?匹配一個字符。
5)輸入輸出從定向
輸入重定向用於改變命令的輸入,輸出重定向用於改變命令的輸出。輸出重定向更爲經常使用,它常常用於將命令的結果輸入到文件中,而不是屏幕上。輸入重定向的命令是<,輸出重定向的命令是>,另外還有錯誤重定向2>,以及追加劇定向>>,稍後會詳細介紹。
6)管道符
前面已經提過過管道符」|」,就是把前面的命令運行的結果丟給後面的命令。
7)做業控制。
當運行一個進程時,你可使它暫停(按Ctrl+z),而後使用fg命令恢復它,利用bg命令使他到後臺運行,你也可使它終止(按Ctrl+c)。
【變量】
前面章節中筆者曾經介紹過環境變量PATH,這個環境變量就是shell預設的一個變量,一般shell預設的變量都是大寫的。變量,說簡單點就是使用一個較簡單的字符串來替代某些具備特殊意義的設定以及數據。就拿PATH來說,這個PATH就代替了全部經常使用命令的絕對路徑的設定。由於有了PATH這個變量,因此咱們運行某個命令時再也不去輸入全局路徑,直接敲命令名便可。你可使用echo命令顯示變量的值。
除了PATH, HOME, LOGNAME外,系統預設的環境變量還有哪些呢?
使用env命令便可所有列出系統預設的所有系統變量了。不過登陸的用戶不同這些環境變量的值也不同。當前顯示的就是root這個帳戶的環境變量了。下面筆者簡單介紹一下常見的環境變量:
PATH 決定了shell將到哪些目錄中尋找命令或程序
HOME 當前用戶主目錄
HISTSIZE 歷史記錄數
LOGNAME 當前用戶的登陸名
HOSTNAME 指主機的名稱
SHELL 前用戶Shell類型
LANG 語言相關的環境變量,多語言能夠修改此環境變量
MAIL 當前用戶的郵件存放目錄
PWD 當前目錄
env命令顯示的變量只是環境變量,系統預設的變量其實還有不少,你可使用set命令把系統預設的所有變量都顯示出來。
限於篇幅,筆者在上例中並無把全部顯示結果都截圖。set不只能夠顯示系統預設的變量,也能夠連同用戶自定義的變量顯示出來。用戶自定義變量?是的,用戶本身一樣能夠定義變量。
雖然你能夠自定義變量,可是該變量只能在當前shell中生效,不信你再登陸一個shell試試?
使用bash命令便可再打開一個shell,此時先前設置的myname變量已經不存在了,退出當前shell回到原來的shell,myname變量還在。那要想設置的變量一直生效怎麼辦?有兩種狀況:
1) 要想系統內全部用戶登陸後都能使用該變量
須要在/etc/profile文件最末行加入 「export myname=Aming」 而後運行」source /etc/profile」就能夠生效了。此時你再運行bash命令或者直接su - test帳戶看看。
2)只想讓當前用戶使用該變量
須要在用戶主目錄下的.bashrc文件最後一行加入「export myname=Aming」 而後運行」source .bashrc」就能夠生效了。這時候再登陸test帳戶,myname變量則不會生效了。上面用的source命令的做用是,講目前設定的配置刷新,即不用註銷再登陸也能生效。
筆者在上例中使用」myname=Aming」來設置變量myname,那麼在linux下設置自定義變量有哪些規則呢?
a. 設定變量的格式爲」a=b」,其中a爲變量名,b爲變量的內容,等號兩邊不能有空格;
b. 變量名只能由英、數字以及下劃線組成,並且不能以數字開頭;
c. 當變量內容帶有特殊字符(如空格)時,須要加上單引號;
有一種狀況,須要你注意,就是變量內容中自己帶有單引號,這就須要用到雙引號了。
d. 若是變量內容中須要用到其餘命令運行結果則可使用反引號;
e. 變量內容能夠累加其餘變量的內容,須要加雙引號;
在這裏若是你不當心把雙引號加錯爲單引號,將得不到你想要的結果
經過上面幾個例子也許你能看得出,單引號和雙引號的區別:用雙引號時不會取消掉裏面出現的特殊字符的自己做用(這裏的$),而使用單引號則裏面的特殊字符所有失去它自己的做用。
在前面的例子中筆者屢次使用了bash命令,若是在當前shell中運行bash指令後,則會進入一個新的shell,這個shell就是原來shell的子shell了,不妨你用pstree指令來查看一下。
pstree這個指令會把linux系統中全部進程經過樹形結構打印出來。限於篇幅筆者沒有所有列出,你能夠直接輸入pstree查看便可。在父shell中設定一個變量後,進入子shell後該變量是不會生效的,若是想讓這個變量在子shell中生效則要用到export指令,筆者曾經在前面用過。
export其實就是聲明一下這個變量的意思,讓該shell的子shell也知道變量abc的值是123.若是export後面不加任何變量名,則它會聲明全部的變量。
在最後面連同咱們自定義的變量都被聲明瞭。
前面光講如何設置變量,若是想取消某個變量怎麼辦?只要輸入」unset 變量名」便可。
用unset abc後,再echo $abc則再也不輸出任何內容。
【系統環境變量與我的環境變量的配置文件】
上面講了不少系統的變量,那麼在linux系統中,這些變量被存到了哪裏呢,爲何用戶一登錄shell就自動有了這些變量呢?
/etc/profile :這個文件預設了幾個重要的變量,例如PATH, USER, LOGNAME, MAIL, INPUTRC, HOSTNAME, HISTSIZE, umas等等。
/etc/bashrc :這個文件主要預設umask以及PS1。這個PS1就是咱們在敲命令時,前面那串字符了,例如筆者的linux系統PS1就是 [root@localhost ~]# ,你不妨看一下PS1的值。
\u就是用戶,\h 主機名, \W 則是當前目錄,\$就是那個’#’了,若是是普通用戶則顯示爲’$’
除了兩個系統級別的配置文件外,每一個用戶的主目錄下還有幾個這樣的隱藏文件:
.bash_profile :定義了用戶的我的化路徑與環境變量的文件名稱。每一個用戶均可使用該文件輸入專用於本身使用的shell信息,當用戶登陸時,該文件僅僅執行一次。
.bashrc :該文件包含專用於你的shell的bash信息,當登陸時以及每次打開新的shell時,該該文件被讀取。例如你能夠將用戶自定義的alias或者自定義變量寫到這個文件中。
.bash_history :記錄命令歷史用的。
.bash_logout :當退出shell時,會執行該文件。能夠把一些清理的工做放到這個文件中。
【linux shell中的特殊符號】
你在學習linux的過程當中,也許你已經接觸過某個特殊符號,例如」*」,它是一個通配符號,表明零個或多個字符或數字。下面筆者就說一說經常使用到的特殊字符。
1. * :表明零個或多個字符或數字。
test後面能夠沒有任何字符,也能夠有多個字符,總之有或沒有都能匹配出來。
2. ? :只表明一個任意的字符
無論是數字仍是字母,只要是一個都能匹配出來。
3. # :這個符號在linux中表示註釋說明的意思,即」#」後面的內容linux忽略掉。
在命令的開頭或者中間插入」#」 ,linux都會忽略掉的。這個符號在shell腳本中用的不少。
4. \ :脫意字符,將後面的特殊符號(例如」*」 )還原爲普通字符。
5. | :管道符,前面屢次說過,它的做用在於將符號前面命令的結果丟給符號後面的命令。這裏提到的後面的命令,並非全部的命令均可以的,通常針對文檔操做的命令比較經常使用,例如cat, less, head, tail, grep, cut, sort, wc, uniq, tee, tr, split, sed, awk等等,其中grep, sed, awk爲正則表達式必須掌握的工具,在後續內容中詳細介紹。
6. $ :除了用於變量前面的標識符外,還有一個妙用,就是和’!’結合起來使用。
‘!$’表示上條命中中最後一個變量(也許稱爲變量不合適,總之就是上條命令中最後出現的那個東西)例如上邊命令最後是test.txt那麼在當前命令下輸入!$則表明test.txt。
1)grep :過濾一個或多個字符,將會在後續內容中詳細介紹其用法。
2) cut :截取某一個字段
語法:cut -d 「分隔字符」 [-cf] n 這裏的n是數字
-d :後面跟分隔字符,分隔字符要用雙引號括起來
-c :後面接的是第幾個字符
-f :後面接的是第幾個區塊
-d 後面跟分隔字符,這裏使用冒號做爲分割字符,-f 1 就是截取第一段,-f和1之間的空格無關緊要。
-c 後面能夠是1個數字n,也能夠是一個區間n1-n2,還能夠是多個數字n1,n2,n3
3) sort :用作排序
語法:sort [-t 分隔符] [-kn1,n2] [-nru] 這裏的n1 < n2
-t 分隔符 :做用跟cut的-d一個意思
-n :使用純數字排序
-r :反向排序
-u :去重複
-kn1,n2 :由n1區間排序到n2區間,能夠只寫-kn1,即對n1字段排序
4) wc :統計文檔的行數、字符數、詞數,經常使用的選項爲:
-l :統計行數
-m :統計字符數
-w :統計詞數
5) uniq :去重複的行,筆者經常使用的選項只有一個:
-c :統計重複的行數,並把行數寫在前面
有一點須要注意,在進行uniq以前,須要先用sort排序而後才能uniq,不然你將得不到你想要的,筆者上面的試驗當中已是排序過因此省略掉那步了。
6)tee :後跟文件名,相似與重定向」>」,可是比重定向多了一個功能,在把文件寫入後面所跟的文件中的同時,還顯示在屏幕上。
7)tr :替換字符,經常使用來處理文檔中出現的特殊符號,如DOS文檔中出現的^M符號。經常使用的選項有兩個:
-d :刪除某個字符,-d 後面跟要刪除的字符
-s :把重複的字符去掉
最經常使用的就是把小寫變大寫: tr ‘[a-z]’ ‘[A-Z]’
固然替換一個字符也是徹底能夠的。
不過替換、刪除以及去重複都是針對一個字符來說的,有必定侷限性。若是是針對一個字符串就再也不管用了,因此筆者建議只是簡單瞭解這個tr便可,之後你還會學到更多能夠實現針對字符串操做的工具。
8)split :切割文檔,經常使用選項:
-b :依據大小來分割文檔,單位爲byte
格式如上例,後面的passwd爲分割後文件名的前綴,分割後的文件名爲passwdaa, passwdab, passwdac …
-l :依據行數來分割文檔
6. ; :分號。平時咱們都是在一行中敲一個命令,而後回車就運行了,那麼想在一行中運行兩個或兩個以上的命令如何呢?則須要在命令之間加一個」;」了。
7. ~ :用戶的家目錄,若是是root則是 /root ,普通用戶則是 /home/username
8. & :若是想把一條命令放到後臺執行的話,則須要加上這個符號。一般用於命令運行時間很是長的狀況。
使用jobs能夠查看當前shell中後臺執行的任務。用fg能夠調到前臺執行。這裏的sleep命令就是休眠的意思,後面跟數字,單位爲秒,經常使用語循環的shell腳本中。
此時你按一下CTRL +z 使之暫停,而後再輸入bg能夠再次進入後臺執行。
若是是多任務狀況下,想要把任務調到前臺執行的話,fg後面跟任務號,任務號可使用jobs命令獲得。
9. >, >>, 2>, 2>> :前面講太重定向符號> 以及>> 分別表示取代和追加的意思,而後還有兩個符號就是這裏的2> 和 2>> 分別表示錯誤重定向和錯誤追加劇定向,當咱們運行一個命令報錯時,報錯信息會輸出到當前的屏幕,若是想重定向到一個文本里,則要用2>或者2>>。
10. [ ] :中括號,中間爲字符組合,表明中間字符中的任意一個
11. && 與 ||
在上面剛剛提到了分號,用於多條命令間的分隔符。另外還有兩個能夠用於多條命令中間的特殊符號,那就是 「&&」和」||」。下面筆者把這幾種狀況全列出:
1) command1 ; command2
2) command1 && command2
3) command1 || command2
使用」;」時,無論command1是否執行成功都會執行command2; 使用」&&」時,只有command1執行成功後,command2纔會執行,不然command2不執行;使用」||」時,command1執行成功後command2 不執行,不然去執行command2,總之command1和command2總有一條命令會執行。