定義監控系統的每一個目錄,而後再去定義主腳本,由於是分佈式,因此每一臺都須要這樣去作,固然事先建立好每一個目錄以及每一個腳本,隨後就把這臺機器上的全部腳本直接拷貝到另一臺機器上去,而後作些更改。
php
小約定之後把全部的shell腳本都放在/usr/local/sbin/下方便去查找mysql
假如說把主腳本放在/usr/local/sbin/下,一下建立各類目錄sql
把主腳本放在bin下,主腳本做爲一個入口,應該去判斷配置文件看一看某些服務,某些監控項目是否須要監控,還須要調取各個須要監控的子腳本shell
[root@100xuni1 bin]# vim main.sh ##編輯主腳本,寫入一下代碼, #!/bin/bash #Written by aming. # 是否發送郵件的開關 export send=1 # 過濾ip地址 export addr=`/sbin/ifconfig |grep -A1 "ens33: "|awk '/inet/ {print $2}'` dir=`pwd` # 只須要最後一級目錄名 last_dir=`echo $dir|awk -F'/' '{print $NF}'` # 下面的判斷目的是,保證執行腳本的時候,咱們在bin目錄裏,否則監控腳本、郵件和日誌頗有可能找不到 if [ $last_dir == "bin" ] || [ $last_dir == "bin/" ]; then conf_file="../conf/mon.conf" else echo "you shoud cd bin dir" exit fi exec 1>>../log/mon.log 2>>../log/err.log echo "`date +"%F %T"` load average" /bin/bash ../shares/load.sh #先檢查配置文件中是否須要監控502 if grep -q 'to_mon_502=1' $conf_file; then export log=`grep 'logfile=' $conf_file |awk -F '=' '{print $2}' |sed 's/ //g'` /bin/bash ../shares/502.sh fi
這個配置文件很簡單,定義一些開關,定一些日誌的路徑,好比說監控mysql的時候,定義mysql的用戶名密碼,以及IP地址,port端口等等vim
[root@100xuni1 mon]# vim conf/mon.conf ## to config the options if to monitor ## 定義mysql的服務器地址、端口以及user、password to_mon_cdb=0 ##0 or 1, default 0,0 not monitor, 1 monitor db_ip=10.20.3.13 db_port=3315 db_user=username db_pass=passwd ## httpd 若是是1則監控,爲0不監控 to_mon_httpd=0 ## php 若是是1則監控,爲0不監控 to_mon_php_socket=0 ## http_code_502 須要定義訪問日誌的路徑 to_mon_502=1 logfile=/data/log/xxx.xxx.com/access.log ## request_count 定義日誌路徑以及域名 to_mon_request_count=0 req_log=/data/log/www.discuz.net/access.log domainname=www.discuz.net
定義幾個子腳本,所謂的監控系統監控項目。
bash
[root@100xuni1 mon]# cd shares/ [root@100xuni1 shares]# vim load.sh #! /bin/bash ##Writen by aming## load=`uptime |awk -F 'average:' '{print $2}'|cut -d',' -f1|sed 's/ //g' |cut -d. -f1` if [ $load -gt 10 ] && [ $send -eq "1" ] then echo "$addr `date +%T` load is $load" >../log/load.tmp /bin/bash ../mail/mail.sh aming_test@163.com "$addr\_load:$load" `cat ../log/load.tmp` fi echo "`date +%T` load is $load"
502須要有個日誌沒有日誌就不能找到狀態碼,服務器
[root@100xuni1 shares]# vim 502.sh #! /bin/bash d=`date -d "-1 min" +%H:%M` c_502=`grep :$d: $log |grep ' 502 '|wc -l` if [ $c_502 -gt 10 ] && [ $send == 1 ]; then echo "$addr $d 502 count is $c_502">../log/502.tmp /bin/bash ../mail/mail.sh $addr\_502 $c_502 ../log/502.tmp fi echo "`date +%T` 502 $c_502"
告警系統disk.sh,他的思路是把全部的分區挨個看下dom
[root@100xuni1 shares]# vim disk.sh #! /bin/bash ##Writen by aming## rm -f ../log/disk.tmp for r in `df -h |awk -F '[ %]+' '{print $5}'|grep -v Use` do if [ $r -gt 90 ] && [ $send -eq "1" ] then echo "$addr `date +%T` disk useage is $r" >>../log/disk.tmp fi if [ -f ../log/disk.tmp ] then df -h >> ../log/disk.tmp /bin/bash ../mail/mail.sh $addr\_disk $r ../log/disk.tmp echo "`date +%T` disk useage is nook" else echo "`date +%T` disk useage is ok" fi