【2018.07.17學習筆記】【linux高級知識 20.20-20.22】

20.20 告警系統主腳本

咱們把整個腳本的目錄mon放在/usr/local/sbin/ 目錄下

編寫主腳本：/mon/bin/main.sh

#!/bin/bash  
export send=1   //shell環境變量，是否發送郵件的開關
export addr=`/sbin/ifconfig |grep -A1 "ens33: "|awk '/inet/ {print $2}'` //把監控的機器的ip地址過濾出來
dir=`pwd`  //獲取當前腳本的目錄，保證後面可以找到配置文件和子腳本
last_dir=`echo $dir|awk -F'/' '{print $NF}'`  //只須要最後一級目錄名
if [ $last_dir == "bin" ] || [ $last_dir == "bin/" ]  //判斷目的是保證執行腳本的時候，咱們在bin目錄裏，否則監控腳本、郵件和日誌頗有可能找不到
then
    conf_file="../conf/mon.conf"   //配置文件的路徑
else
    echo "you shoud cd bin dir"   
    exit
fi
exec 1>>../log/mon.log 2>>../log/err.log  //記錄監控主腳本運行的輸出和錯誤信息到文件
echo "`date +"%F %T"` load average"
/bin/bash ../shares/load.sh    //執行負載監控子腳本
if grep -q 'to_mon_502=1' $conf_file  //先檢查配置文件中是否須要監控502
then
    export log=`grep 'logfile=' $conf_file |awk -F '=' '{print $2}' |sed 's/ //g'` //過濾web的訪問日誌的路徑給環境變量log
    /bin/bash  ../shares/502.sh   //執行502監控子腳本
fi

20.21 告警系統配置文件

配置文件路徑在： /mon/conf/mon.conf

##mon.conf
// to config the options if to monitor
// 定義mysql的服務器地址、端口以及user、password
to_mon_cdb=0  //0 or 1, default 0,0 not monitor, 1 monitor 是否監控mysql
db_ip=10.20.3.13 

db_port=3315
db_user=username
db_pass=passwd

to_mon_httpd=0  // httpd  若是是1則監控，爲0不監控

to_mon_php_socket=0  // php 若是是1則監控，爲0不監控

to_mon_502=1   // http_code_502  
logfile=/data/log/xxx.xxx.com/access.log  //須要定義訪問日誌的路徑

to_mon_request_count=0  //request_count數監控  
req_log=/data/log/www.discuz.net/access.log  //定義訪問日誌路徑以及域名
domainname=www.discuz.net

20.22 告警系統監控項目

系統負載的子腳本：/mon/shares/load.sh

#! /bin/bash
load=`uptime |awk -F 'average:' '{print $2}'|cut -d',' -f1|sed 's/ //g' |cut -d. -f1`  //過濾系統一分鐘的負載
if [ $load -gt 10 ] && [ $send -eq "1" ]  //負載大於10，發送郵件
then
    echo "$addr `date +%T` load is $load" >../log/load.tmp  //記錄負載的數值到文件
    /bin/bash ../mail/mail.sh xxx@163.com "$addr\_load:$load" `cat ../log/load.tmp`  //發送郵件動做：三個參數：收件人、主題、郵件內容
fi
echo "`date +%T` load is $load"

web服務狀態碼502的監控腳本：/mon/shares/502.sh

#! /bin/bash 502.sh 
d=`date -d "-1 min" +%H:%M`  //記錄上一分鐘的時間
c_502=`grep :$d:  $log  |grep ' 502 '|wc -l`  //統計上一分鐘，502狀態碼出現的次數
if [ $c_502 -gt 10 ] && [ $send == 1 ]  //一分鐘出現大於10次
then 
     echo "$addr $d 502 count is $c_502">../log/502.tmp  //記錄502次數寫進文件保存
     /bin/bash ../mail/mail.sh xxx@163.com "$addr\_502 $c_502"  `cat ../log/502.tmp`  //發送郵件動做
fi
echo "`date +%T` 502 $c_502"

磁盤空間的子腳本：/mon/shares/disk.sh

#! /bin/bash
rm -f ../log/disk.tmp  //刪除上一次的告警記錄文件
for r in `df -h |awk -F '[ %]+' '{print $5}'|grep -v Use`  //循環匹配各個分區的磁盤使用率
do
    if [ $r -gt 90 ] && [ $send -eq "1" ]  //若是超過90%則告警，發郵件
    then
       echo "$addr `date +%T` disk useage is $r" >>../log/disk.tmp  //超過90%的告警信息寫進記錄文件
    fi
    if [ -f ../log/disk.tmp ] //若是告警記錄文件存在
    then
       df -h >> ../log/disk.tmp //把全部分區信息也寫入記錄文件
       /bin/bash ../mail/mail.sh xxx@163.com "$addr\_disk $r" `cat ../log/disk.tmp`  //發郵件動做
       echo "`date +%T` disk useage is No ok"
    else
       echo "`date +%T` disk useage is ok"
    fi
done