機房ping監控 smokeping+prometheus+grafana

1、前言

一、本監控方案主要由smokeping+promethues+grafana組成。smokeping主要數據採集，promethues做爲數據存儲，grafana數據展現
二、其實smokeping也有本身的展現方案，可是太low太難看，不符合當下裝逼的風格，因此果斷換成grafana
三、之因此使用promethues，是因爲目前的生產環境有一個promethues，能夠直接複用，固然也能夠選用graphite等

2、環境準備

組件	版本
OS	Ubuntu 16.04.4 LTS

3、smokeping

smokeping的原理其實很簡單，就是使用fping工具ping全國各省的IP，將結果存儲在rrd文件當中

安裝smokeping

root@localhost:/tmp# apt-get install gcc make rrdtool librrds-perl librrds-dev openssh-client libcgi-fast-perl libconfig-grammar-perl libdigest-hmac-perl liblwp-protocol-https-perl liblwp-mediatypes-perl fpint
root@localhost:/tmp# ./configure --prefix=/usr/local/smokeping
root@localhost:/tmp# unset LC_ALL
root@localhost:/tmp# make && make install

安裝過程當中須要不少依賴包，若是./configure報錯了，就安裝對應的包就好了

配置過程

克隆代碼

cd /tmp
git clone https://github.com/wilsonchai8/idc_ping_monitor.git

建立config文件，而且配置全國各區域ip監測點

smokeping_home_dir=/usr/local/smokeping
cd $smokeping_home_dir/etc
cp -rf /tmp/idc_ping_monitor/smokeping/* ./

監測點ip主要由國內的三大運營商的IP站點組成，也能夠自定義須要檢測的站點，更多的ip地址，能夠參考 http://ip.yqie.com/china.aspx

啓動：

mkdir -p $smokeping_home_dir/cache
mkdir -p $smokeping_home_dir/data
mkdir -p $smokeping_home_dir/var
chmod -R 0755 $smokeping_home_dir
chmod 600 $smokeping_home_dir/etc/smokeping_secrets.dist
$smokeping_home_dir/bin/smokeping

4、promethues

爲何要選擇時序數據庫？
● 時序數據庫強調的是以時間爲主座標，根據時間的流逝來記錄事物的變化關係。關係型數據庫主要是描述事物與事物之間的變化關係，這個關係相對於時間就比較複雜，好比一對多，多對多。而時間相對簡單，只須要簡單記錄在這個時間點的某個事物發生的變化。監控數據偏偏符合這個時間變化，咱們只須要記錄某個指標在時間流逝當中的變化便可
● 時序數據庫很是適合"變化"。好比在關係型數據庫中描述事物的關係，使用表結構，一旦定義下來，就遵循這個表結構不斷的採集數據，若是發生變化，好比新增一個採集維度，那就要變動表結構，DDL操做對於關係型數據庫來講，是很是大的代價。而後這對於時序數據庫來講，並無這個煩惱，時間序列數據集跟蹤整個系統的改動並不斷插入新數據，而不是更新原有數據。因此，對於監控數據來講，採集新的數據維度對於整個表結構不會有任何影響，由於它壓根就沒有表結構

balabala說了一大堆，終於要開始使用promethues（關於promethues的安裝，網上一搜一大把），通過一頓猛如虎的操做：

模塊	訪問地址
Prometheus server	192.168.56.101:9090
Prometheus Pushgateway	192.168.56.101:9091

把smokeping採集的數據經過rrdtool讀取以後，按照必定的格式推送到prometheus的gateway，時間間隔是1分鐘

cp /tmp/idc_ping_monitor/prometheus/collection_to_prometheus.py $smokeping_home_dir

配置crontab

crontab -e 

* * * * * python /usr/local/smokeping/collection_to_prometheus.py

在/usr/local/smokeping/collection_to_prometheus.py中，按照實際狀況配置3個參數：

'LOG_FILE' : '/tmp/smoking_pushgateway.log'             # 日誌文件  
'prometheus_gateway' : 'http://192.168.56.101:9091'     # Prometheus gateway地址  
'data_dir' : '/usr/local/smokeping/data'                # smokeping rrd文件的存放地址

等待一段時間以後，已經有數據了，在prometheus裏，metrics name：
smokeping_lost_package_num
smokeping_rrt

附上源代碼：

https://github.com/wilsonchai8/idc_ping_monitor/blob/master/prometheus/collection_to_prometheus.py

5、grafana

將idc_ping_monitor/grafana/ping_monitor.json導入到grafana便可

效果：

6、小結

● 本文的思路：smokeping採集數據以後存儲到rrd文件，而後經過腳本把數據提取出來，格式化以後發送到prometheus，而後經過grafana展現出來
● 文中使用的全國ping站點列表，數據推送腳本以及grafana模板 https://github.com/wilsonchai8/idc_ping_monitor

---

至此，本文結束 在下才疏學淺，有撒湯漏水的，請各位不吝賜教...