shell實例練習+詳解

想着將Shell與Python和Java等腳本比較比較，當一有這個念頭我就放棄了。這太侮辱Shell了。（哭笑臉！）

做爲一個程序員，Linux那是最基本要求。而shell腳本有時候也會顯示它在Linux中獨特的魅力，讓咱們一塊兒來學習學習吧！！！！

 

我愛學習！！

 

案例一

打印九九乘法表

　　>循環語句（for）

　　>變量計算（加減乘除）

語句：

1 for i in $(seq 9); do  for j in $(seq $i); do echo -n "$i*$j=$(($i*$j))  "; done;echo ""; done

結果：

 

說明：

>for循環：for arg in Range；do CMD；done

　　循環常見場景：

　　##一、有限數字（用空格隔開）
　　for i in 1 2 3 4 5;do echo $i ;done　
　　##二、序列數據（seq 開始 步長 最後） ---步長默認1
　　for i in $(seq 1 3 100); do echo $i ;done
　　##三、命令結果（默認空格爲分隔符）
　　for i in `cat 01.txt`;do echo $i ;done
　　for i in `ls | grep "heh"` ;do echo $i ;done
　　##四、語法循環（相似C，注意爲雙括號,分號隔開）
　　for ((i=1;i<3;i+=2));do echo i ;done
　　for ((;;);do echo"無限循環";done
　　##五、其餘狀況
　　具體狀況，具體分析

>算術運算

　　shell中涉及的算術計算與其餘語言同樣（或其餘語言與shell同樣，順序請強迫症患者忽略），有加（+）、減（-）、乘（*）、除（/）、取模（\）、取餘（%）、求冪（**）。

shell中有好幾種方法實現運算。

　　方法一,中括號：[...]   ##中括號完成算術執行，需經過"$"引用打印出來

　　　　echo $[2+3]

　　方法二，雙小括號：((...))    ##等同於let 

　　　　echo $((3+2))    ##echo $"let 3+2"

　　方法三，let、expr表達式

　　　　let i= 3+2；echo $i；

　　　　echo $(expr $i * 3)；（運算符之間要有空格，不然所有不執行運算所有輸出）（expr還有其餘高級應用，暫且不說）

　　注意：bash不支持浮點類型計算，以上都只能實現整數運算。浮點的運算須要使用bc/awk

　　　　echo 0.5*4-0.2|bc；

　　　　echo $(awk  'BEGIN{print 0.5*4-0.2}')； 

 

案例二

循環打印日期（可指定起始日期或默認日期），並返回天數

　　> 循環

　　>if判斷

　　>date日期

 1 #!/bin/bash
 2 
 3 ##判斷變量，是否爲空（若是沒有或只有一個，進行默認賦值）
 4 if [ "$1" == "" ] 
 5 then
 6     start_date=`date -d "today last month" "+%Y%m01"`
 7     end_date=`date -d "today" "+%Y%m%d"`
 8 else
 9     if [ "$2" == "" ]
10     then
11         start_date=`date -d "$1" "+%Y%m%d"`
12         end_date=`date -d "today" "+%Y%m%d"`
13     fi
14 fi        
15 
16 ##判斷兩個變量是否有問題(可擴展，進行可用性識別)
17 if [ "$start_date" -gt "$end_date" ]    
18 then
19     echo "ERROR! \nplease input a right date"
20     exit
21 fi
22 
23 ##經過循環，返回日期值（包含開始和結束日期，閉區間）
24 for i in `seq 0 100000`
25 do
26     t_date=`date -d "${start_date} +$(($i+1)) day" "+%Y%m%d"`
27     echo $t_date
28     cnt_days=$i
29     
30     ##若是循環到當天，就退出
31     if [ $t_date == $end_date ]
32     then
33         break
34     fi
35 done
36 
37 echo "The days between two date is "+$cnt_days+" !"

>if判斷

格式：if 條件 ; then cmd ; elif cmd ; else cmd ; fi

條件格式要求：中括號兩端有至少一個空格，如 [ **** ] ；判斷符中間也須要空格，不然執行雖然不報錯但不是咱們要的結果！

　　經常使用的條件：

　　數值判斷

　　數字1 -eq 數字2　　 兩數相等爲真 （equal）
　　數字1 -ne 數字2　　 兩數不等爲真 （not equal）
　　數字1 -gt  數字2　　 數字1大於數字2爲真 （great than）
　　數字1 -ge 數字2 　　數字1大於等於數字2爲真 （great equal）
　　數字1 -lt   數字2　　 數字1小於數字2爲真 （less than）

　　數字1 -le  數字2　　 數字1小於等於數字2爲真 （less equal）

　　文件判斷

　　-e  文件是否存在（目錄或普通文件，exists） 【示例：[ -e ./02.txt ] && echo "hehe"，這是一種簡版的if判斷，先執行中括號內部命令，true則執行&&後的命令；】

　　-f  是否爲普通文件 （file）【示例：[ -f ./02.txt ] && echo "heh"】

 　  -d  是否爲目錄文件（directory）【示例：[ -d ./111 ] && echo "heh"】 　  

　　-r  文件權限：是否可讀（read） 【示例：[ -r ./111 ] && echo "heh"】

　　-w  文件權限：是否可寫（write） 【示例：[ -w ./111 ] && echo "heh"】

　　-x  文件權限：是否可執行（execute） 【示例：[ -x ./111 ] && echo "heh"】

　　字符段判斷

　　==  是否相同（測試「=」也能夠）【[ "hehe" == "xizao"  ] && echo "good"】

　　!=  是否不等  【[ "hehe" ！= "xizao"  ] && echo "good"】

　　-z  是否爲空（長度是否爲0）  【[ -z "" ] && echo "good"】

 　　

 案例三

　　對重要的系統數據進行備份，備份週期爲一個月（20170901增長）

 1 #!/bin/bash
 2 
 3 #備份日期
 4 date_log=`date "+%Y%m%d"`
 5 
 6 #加入備份root中的數據
 7 tar -czvf /home/shj/bak/root_${date_log}_bak.tar.gz  /root 
 8 
 9 #刪除一個月以前的數據
10 find /home/shj/bak -name "root_*_bak" -mtime +30 -exec rm -rf {} \;

　　經過crontab -e，作成定時任務每日零點零分執行（假如個人文件名爲：shj_bak.sh）

1 #分 時 天 月 周 cmd
2 0 0 * * * sh shj_bak.sh

 

 案例四

　　今天遇到同事不知道怎麼了就把crontab任務刪除了，須要進行恢復（20170901）

　　一、經過cron日誌查看有那些任務（若是這些日誌在期間內沒有執行過，將沒法收集）

　　　　cat /var/log/cron | grep "shj" | awk -F「(」 '{print $3}' | sed 's/(//g' | sort | uniq -c  # cat查詢數據後以管道符傳給grep，匹配shj用戶，結果給到awk，「（」做爲分隔符，打印第三列，並用sed將「）」替換掉，排序後取出惟一值,並顯示執行了多少次。  

　　二、知道了命令和執行次數，就須要考慮執行頻率了。找到日誌開始時間和結束時間

　　　　cat /var/log/cron | grep "shj" | awk '{print $1 " " $2}' | sort | uniq  >mytmp

　　　　echo "日誌開始時間爲：`head -1 mytmp`,，結束時間爲：`tail -1 mytmp`"

　　三、重寫crontab

 

案例五

　　經過shell作hive、MySQL的定時任務。（當前工做很多都是這個）（20170906）

　　shell寫hive的定時任務（路徑默認爲當前家目錄）

　　　　一、建立你須要的腳本，例：vim  hive_perday.sh

　　　　二、編寫shell腳本

#！/bin/bash
    
    if [ "$1"==""  ]  #$1若是不加"",當$1爲空會報錯。假如這個有個日期參數。
    then
        para1=`date "+%Y&m%d"`
    else
        para1=$1
    fi

#寫你的hive語句（假如須要參數）
    hive_sql="select * from mytable where col>'para1'"
#執行你的hive，並將結果輸出到指定位置（含錯誤）,將&1替換爲/dev/null則不輸出錯誤
    hive -e "{$hive_sql}" >~/file 2>&1
#執行hive文件
    hive -f hive_file

#寫入你的MySQL語句
mysql_sql="select * from table where *****"
mysql -host10.10.10.10 -utest -p**** -P3306 -e "{$mysql_sql}"

　　　　三、將你的腳本部署到定時任務中，若是是長期執行則用crontab，若是隻執行一次用at。

 

案例六

　　Linux文本處理（今天將csv導入MySQL時，發現多了一列以及表頭）。因而，咱們用awk、sed處理一下吧。（20171011補充）

　　]$ awk -F, '{print $1","$3","$4","$5}' filename >new_file.csv    處理掉多餘的列

　　]$ sed -n '2,$p' new_file.csv > final.csv

　　]$ mysql -h10.**** -u*** -p****

　　mysql > load data local infile 'final.csv' insert into table(a,b,c,d); 

  

原創博客，轉載請註明出處！歡迎郵件溝通：shj8319@sina.com