Shell中的函數、數組、告警系統

時間  2019-11-05
標籤 shell 函數 數組 告警 系統 欄目 Unix 简体版
原文   原文鏈接

 

20.16/20.17 shell中的函數
20.18 shell中的數組
20.19 告警系統需求分析
20.20 告警系統主腳本
20.21 告警系統配置文件
20.22 告警系統監控項目
20.23/20.24/20.25 告警系統郵件引擎
20.26 運行告警系統php

 

1、shell中的函數

shell函數，至關於一個子shell，就是一個代碼段，定義完函數就能夠引用它。python

把一段代碼整理到了一個小單元中，並給這個小單元起一個名字，當用到這段代碼時直接調用這個小單元的名字便可。mysql

格式：sql

function f_name()          function後是函數的名字，而且 function 這個單詞是能夠省略掉的,函數必需要放在最前面
{                          花括號{} 裏面爲具體的命令      
command
}

函數，能夠直接寫在腳本內，至關於直接調用shell

內部的變量數組

  • $1 第一個參數bash

  • $2 第二個參數服務器

  • $3 第三個參數架構

  • $n 第n個參數框架

  • $# 總共有幾個參數

  • $0 腳本名字

案例一：

#!/bin/bash
function inp()
{
   echo "第一個參數 $1"
   echo "第二個參數 $2"
   echo "第三個參數 $3"
   echo "腳本名字 $0"
   echo "共有 $# 個參數"
}
inp a b   或者寫成inp $1 $2，須要傳參數

案例二：傳遞參數求和

  • 用於定義加法的函數，shell中定義的函數，必須放在上面

  • 在shell裏面須要優先定義函數，好比在調用這個函數的時候，函數尚未定義，就會報錯

  • 在想要調用哪個函數，就必須在調用語句以前，先定義這個函數

#!/bin/bash
sum()
{
  s=$[$1+$2]
 echo $s
}
sum 1 3            函數的參數

案例三:輸入網卡的名字，檢查網卡的IP地址

ifconfig |grep -A1 "ens33: "         //提出含有"ens33: " 當前行和下一行

ifconfig |grep -A1 "ens33: "|grep 'inet' |awk '/inet/ {print $2}'        //刪選出含有inet行的，第二段內容，分段符默認爲空格

#!/bin/bash
ip()
{
 ifconfig |grep -A1 "$1: "|grep 'inet' |awk '/inet/ {print $2}'
}
read -p "please input the eth name: " eth            //輸入網卡名字
myip=`ip $eth`                            //定義函數參數，以及函數的值賦予myip
echo "$eth ip is $myip"

2、shell中的數組

定義數組，查看數組

定義數組 b=(1 3 5)

查看數組

echo ${b[@]}  或  echo ${b[*]}  查看數組的元素個數，顯示整個數組的內容
echo ${b[0]} 讀取第一個元素，數組從0開始
echo ${#b[@]} 或 echo ${#b[*]} 獲取數組的元素個數

數組的元素的賦值

b[1]=q        把q賦給b[1]，即第2位,當再次給b[1]賦值，會覆蓋以前的
b[3]=4        把4賦給b[3]，由於b[3]不存在，則自動建立
b[6]=6    
b[4]=4c   b[6]以前爲空，因此當賦值靠前會在前面建立

數組元素的刪除

unset b[1]        刪除b[1]元素，即第2位
unset b        清空數組元素

數組中元素的截取（數組分片）

a=(`seq 1 10`) //定義數組a
echo ${a[@]:3:4}        //從第3位開，截取4位
echo ${a[@]:0-3:2}    //從倒數第3位開始，截取2位

數組中元素的替換

echo ${a[@]/8/6}   把8替換成6

3、告警系統需求分析

  • 需求：使用shell定製各類個性化告警工具，但須要統一化管理、規範化管理。

  • 思路：指定一個腳本包，包含主程序、子程序、配置文件、郵件引擎、輸出日誌等。

  • 主程序：做爲整個腳本的入口，是整個系統的命脈。

  • 配置文件：是一個控制中心，用它來開關各個子程序，指定各個相關聯的日誌文件。

  • 子程序：這個纔是真正的監控腳本，用來監控各個指標。

  • 郵件引擎：是由一個python程序來實現，它能夠定義發郵件的服務器、發郵件人以及發件人密碼

  • 輸出日誌：整個監控系統要有日誌輸出。

要求 : 咱們的機器角色多種多樣，可是全部機器上都要部署一樣的監控系統，也就說全部機器無論什麼角色，整個程序框架都是一致的，不一樣的地方在於根據不一樣的角色，定製不一樣的配置文件。

程序架構：

各子目錄說明：

  • bin下是主程序

  • conf下是配置文件

  • shares下是各個監控腳本

  • mail下是郵件引擎

  • log下是日誌。

 4、告警系統主腳本

通常腳本都放在/usr/local/sbin 目錄下，所以在此目錄下建立相應的目錄。

cd /usr/local/sbin
mkdir mon //在sbin下建立腳本主目錄
cd mon/
mkdir mail bin shares conf log //在主目錄下建立各子目錄

主腳本必須放在bin/下；

#!/bin/bash
#Written by aming.
# 是否發送郵件的開關
export send=1
#只要把send 改爲了1 ，就會給下面全部的監控的項目都會發送郵件，export表示全部的變量會應用在全部的子腳本里
# 如果系統處於維護狀態，就須要關閉全部的服務，這時候就須要先把告警關閉，不然會一直髮郵件
# 過濾ip地址；能夠加定義一個hostname，這樣能夠知道是哪臺機器
export addr=`/sbin/ifconfig |grep -A1 "ens33: "|awk '/inet/ {print $2}'`
# 找一下當前腳本所在的目錄
dir=`pwd`
# 只須要最後一級目錄名
last_dir=`echo $dir|awk -F'/' '{print $NF}'`
# 下面的判斷目的是，保證執行腳本的時候，咱們在bin目錄裏，否則監控腳本、郵件和日誌頗有可能找不到
if [ $last_dir == "bin" ] || [ $last_dir == "bin/" ]; then
    conf_file="../conf/mon.conf"
else
    echo "you shoud cd bin dir"
    exit
fi
exec 1>>../log/mon.log 2>>../log/err.log
echo "`date +"%F %T"` load average"    #求出系統負載
/bin/bash ../shares/load.sh
#先檢查配置文件中是否須要監控502，到配置文件中遍歷一遍，看看是否須要監控502
if grep -q 'to_mon_502=1' $conf_file; then
    export log=`grep 'logfile=' $conf_file |awk -F '=' '{print $2}' |sed 's/ //g'`
    /bin/bash  ../shares/502.sh        #找出log的路徑
fi

5、告警系統配置文件

告警系統mon.conf內容，須要放在conf/目錄下；

主要定義一些開關，定義一些對應的日誌路徑，或者說監控mysql的用戶名和密碼，以及IP地址port端口等

## to config the options if to monitor
## 定義mysql的服務器地址、端口以及user、password
to_mon_cdb=0   ##cdb等於0 or 1, default 0,0 not monitor, 1 monitor
db_ip=10.20.3.13
db_port=3315
db_user=username
db_pass=passwd
## httpd   若是是1則監控，爲0不監控
to_mon_httpd=0
## php 若是是1則監控，爲0不監控
to_mon_php_socket=0
## http_code_502  須要定義訪問日誌的路徑
to_mon_502=1
logfile=/data/log/xxx.xxx.com/access.log
## request_count   定義日誌路徑以及域名
to_mon_request_count=0
req_log=/data/log/www.discuz.net/access.log
domainname=www.discuz.net


在此定義log目的：

要考慮監控的機器確定不止1臺；要想要讓腳本通用，兼容性很強，就須要把全部須要監控的服務的日誌都載入到配置文件中，改動起來方便，免得後期改動起來一個一個的對應腳本去修改，提升生產效率。

6、告警系統監控項目

根據主腳本的定義：/bin/bash ../shares/load.sh 在shares目錄下建立load.sh腳本。

#! /bin/bash
load=`uptime |awk -F 'average:' '{print $2}'|cut -d',' -f1|sed 's/ //g' |cut -d. -f1`
#計算系統負載
if [ $load -gt 10 ] && [ $send -eq "1" ]  #負載超過10，且不在維護模式，$send已在主腳本中定義
then
    echo "$addr `date +%T` load is $load" >../log/load.tmp
#這條命令的目的是爲了發送日誌，日誌輸出位置已在主腳本定義
    /bin/bash ../mail/mail.sh foutt7777@163.com "$addr\_load:$load" `cat ../log/load.tmp`
fi
echo "`date +%T` load is $load"

建立告警系統腳本 502.sh

#! /bin/bash
d=`date -d "-1 min" +%H:%M`
c_502=`grep :$d:  $log  |grep ' 502 '|wc -l`
if [ $c_502 -gt 10 ] && [ $send == 1 ]; then
     echo "$addr $d 502 count is $c_502">../log/502.tmp
     /bin/bash ../mail/mail.sh $addr\_502 $c_502  ../log/502.tmp
fi
echo "`date +%T` 502 $c_502"


腳本釋義：
截取一分鐘前的日誌文件並判斷，若是502的次數超過10次，或者不在維護模式（主腳本已經定義）就調用mail發郵件，若是沒有，僅僅記錄日誌。

告警系統 disk.sh

磁盤使用率

#! /bin/bash
LANG=en     #定義系統語言
rm -f ../log/disk.tmp
## 用空格或者%爲分隔符，篩選出來磁盤使用量的百分比。
for r in `df -h |awk -F '[ %]+' '{print $5}'|grep -v Use`     #查看各個磁盤的已用百分比，返回數字
do
    if [ $r -gt 90 ] && [ $send -eq "1" ]       #判斷百分比是否大於90，而且send=1
then
    echo "$addr `date +%T` disk useage is $r" >>../log/disk.tmp
fi
if [ -f ../log/disk.tmp ]  #判斷文件是否存在
then
    df -h >> ../log/disk.tmp
    /bin/bash ../mail/mail.sh $addr\_disk $r ../log/disk.tmp
    echo "`date +%T` disk useage is nook"
else
    echo "`date +%T` disk useage is ok"
fi

7、告警系統郵件引擎

mail.sh（告警收斂）

  • 作zabbix的時候，作過mail.py的腳本，在這裏，直接調用進行使用就能夠。

  • 可是告警郵件引擎核心，conf主配置文件調用到的都是mail.sh ，因此這裏須要定義調用mail.py的sh腳本

  • mail.sh目的是作告警收斂，若是不想作告警收斂，在發現問題的時候直接告警就好，可是，可能會發生1分鐘前發現問題，1分鐘戶問題解決，這樣就會變成誤報，這樣會很麻煩

  • 收斂的目的就是1分鐘前發現問題，而後到10分鐘後，服務尚未恢復，就會告訴管理人員10分鐘了服務還未恢復

 

log=$1  #log做爲一個變量，接收來自第一個參數的值
t_s=`date +%s`  #時間戳
t_s2=`date -d "2 hours ago" +%s` #兩個小時前的時間戳
if [ ! -f /tmp/$log ]   #若是日誌文件不存在
then
    echo $t_s2 > /tmp/$log  #生成日誌，把兩個小時前的時間戳寫到日誌第一行
fi
t_s2=`tail -1 /tmp/$log|awk '{print $1}'`  #截取時間戳，最後一行
echo $t_s>>/tmp/$log    #追加當前時間戳，寫入
v=$[$t_s-$t_s2]   #時間戳的時間差（以秒爲單位）詳情以下
echo $v
if [ $v -gt 3600 ]  #此處的if判斷是，當過了1小時若是仍是沒有恢復再次發告警郵件。調用mail.py（若是沒有恢復，每1小時發一次）
then
    ./mail.py  $1  $2  $3   #大於一小時告警
    echo "0" > /tmp/$log.txt #生成一個新的.txt日誌。用來記錄告警
else
    if [ ! -f /tmp/$log.txt ] #判斷有沒有這個日誌文件（計數器文件）
    then
        echo "0" > /tmp/$log.txt  #計數器歸零
    fi
    nu=`cat /tmp/$log.txt` #查看計數器的數字
    nu2=$[$nu+1]            #每執行一次，nu2累加1，直到大於10，走下面的條件
    echo $nu2>/tmp/$log.txt #把計數器的值寫入日誌文件（重置）
    if [ $nu2 -gt 10 ] #大於10
    then
         ./mail.py  $1 "trouble continue 10 min $2" "$3" #表明着已經持續了10分鐘了
         echo "0" > /tmp/$log.txt #從新歸零開始計數
    fi
fi

腳本解析：

  • 以秒爲單位的目的：腳本是每隔一分鐘執行一次的，若是觸發了就告警，若是短期搞定或者告警數量不少，告警信息就會影響你解決分析判斷問題，若是成千上百臺機器，那就是太多了

  • 腳本開始報警，log 的$1是什麼？ 當報警的時候執行mail.sh 緊接着給了個參數，那個參數就是所謂的$1。t_s 時間戳 t_s2 2小時以前的時間戳，定義兩小時的緣由就是爲了執行下面的if語句，條件成立就實現了我們的報警條件，開始報警。

  • 發了郵件後，寫一個計數器在log.txt中，else咱們如今就不執行了，由於那是小於3600才執行的東西。

  • 腳本每分鐘執行一次，第二次開始，log，t_s，t_s2相對於第一次只是增長了一分鐘，判斷文件是否存在，由於上一次剛剛執行過，因此必定是存在的，t_s2就只是增長了60s 因此通過提取給變量v，判斷不超過3600，開始執行else的內容，第一次執行的時候已經建立了log.txt 因此是有的且nu爲0 nu2爲1，nu2不大於10,因此就是再次循環 。

  • 直到執行到最後一步nu2爲11了，那也就是到了10分鐘了，若是故障仍是存在，運維再次收到一個告警郵件，故障已經持續10分鐘了。這樣就實現了我們所說的「告警收斂」

  • 若是超過10分鐘再次發了郵件，而後執行計數器歸0，再次開始從新循環計數。

  • 最後告警解除了，再也不調用mail.sh，也就恢復了，不在執行mail.sh了。

  • 假如腳本在執行3分鐘的時候，忽然故障恢復了，腳本也就不會再次執行，而後計數器保持在2,在計數週期內若是恢復，不告警即不發郵件，但只有在一個小時之後故障纔會消失，大於3600的，若是在一個小時內再次報警，仍是按照以前的計數器繼續執行！ 裏面用python寫的腳本 mail.py 在zabbix這課裏面；

8、運行告警系統

腳本加入crontab 每分鐘執行一次

crontab -e

* * * * * cd /usr/local/sbin/mon/bin; sh main.sh

相關文章
相關標籤/搜索
每日一句
    每一个你不满意的现在，都有一个你没有努力的曾经。
本站公眾號
   歡迎關注本站公眾號,獲取更多信息
聯繫我們 最近搜索 最新文章 沪ICP备13005482号-10 MyBatis教程 SQL 教程 MySQL教程 Java 教程 Thymeleaf 教程 Hibernate教程 Spring教程 Redis教程