ELK 服務端程序啓停自動管理工具之supervisor

一，說說來龍去脈

說說痛點，elasticsearch,kafka,zookeeper,kibana,elasticsearch-head,logstash，logstash是須要常常重啓的，你上了點過濾規則或者修改點啥的，每次都尼瑪殺進程，再nohup ，還看不到日誌，這太不符合人性了，人性的優勢之一就是懶惰。打開web 界面，點一下鼠標解決問題豈不是棒棒噠，還能經過web 界面看看後臺日誌，perfect！子曰：「工欲善其事，必先利其器。」 開搞！
supervisor運行的系統：centos 7
supervisor version：3.3.4

二，Supervisor 簡介及優點

Supervisor 簡介：
Supervisor is a client/server system that allows its users to monitor and control a number of processes on UNIX-like operating systems.
Supervisor 是個c/s 架構的系統，它容許用戶在類Unix 系統上管理和監控必定數量的程序運行；
你有沒有不少源碼安裝的程序？你怎麼啓動這些程序？nohup 是否是？仍是screen？仍是& 後臺？仍是自練神功，寫一堆啓動腳本呢？即便是這樣你的程序由於bug或者其它緣由down了呢？仍是須要你手動去啓動是不？
當你瞭解supervisor以後你就知道，什麼叫磨刀不誤砍柴工了！supervisor 有哪幾個niubility的功能呢？
1，程序啓動，中止，重啓統一管理，提供web和命令行方式；
2，程序down掉自動拉起；
3，能夠指定啓動用戶，安全方面槓槓滴；
4，能夠定義group 重啓，和啓動；
5，web 界面管理很是方便，畢竟點點鼠標就搞定了的事情，誰不肯意呢？

三，正式開搞

#supervisor 是用Python寫的程序，因此能夠經過easy_install 來安裝，也能夠用pip 來安裝，這個看本身了；
#我習慣用pip 裝東西，因此用easy_install 安裝pip
easy_install pip
#以後經過pip 安裝supervisor
pip install supervisor

#爲supervisor建立工做目錄與配置文件目錄而且賦予該目錄755 的權限；
mkdir -m 755 -p /etc/supervisor/conf.d

#經過supervisor 提供的 echo_supervisord_conf 命令生成默認配置文件、
echo_supervisord_conf > /etc/supervisor/supervisord.conf
#經過cat 命令查看配置文件是否生成；

cat /etc/supervisor/supervisord.conf |grep -v "^;" |grep -v "^$"
[unix_http_server]
file=/tmp/supervisor.sock   ; the path to the socket file
[inet_http_server]         ; inet (TCP) server disabled by default  #是否開啓web 管理界面
port=ip:9001        ; ip_address:port specifier, *:port for all iface  #web 訪問端口；
username=user          ; default is no username (open server)  #web 界面訪問用戶名；
password=password              ; default is no password (open server)  #web 界面訪問密碼；
[supervisord]
logfile=/tmp/supervisord.log ; main log file; default $CWD/supervisord.log  #日誌存放路徑
logfile_maxbytes=50MB        ; max main logfile bytes b4 rotation; default 50MB  #日誌大小
logfile_backups=10           ; # of main logfile backups; 0 means none, default 10  #日誌滾動多少次
loglevel=info                ; log level; default info; others: debug,warn,trace   #log 級別
pidfile=/tmp/supervisord.pid ; supervisord pidfile; default supervisord.pid  #pid 文件
nodaemon=false               ; start in foreground if true; default false  #是否在前臺啓動，默認是false，即以 daemon 的方式啓動
minfds=1024                  ; min. avail startup file descriptors; default 1024 #能夠打開的文件描述符的最小值，默認 1024
minprocs=200                 ; min. avail process descriptors;default 200       #能夠打開的進程數的最小值，默認 200
[rpcinterface:supervisor] 
supervisor.rpcinterface_factory = supervisor.rpcinterface:make_main_rpcinterface 
[supervisorctl]
serverurl=unix:///tmp/supervisor.sock ; use a unix:// URL  for a unix socket    #經過UNIX socket鏈接supervisord，路徑與unix_http_server部分的file一致
[include] 
files =/etc/supervisor/conf.d/*.conf  #引入額外的配置文件

#放到/etc/supervisor/conf.d/ 的xxx.conf配置文件

[program:logstash-pack]   #是被管理的進程配置參數，xx是進程的名稱，經過supervisorctl 管理程序的時候和web 界面使用
command = /usr/local/logstash/bin/logstash -f /usr/local/logstash/config/logstashx.conf 
[program:kafka]
command = /usr/local/kafka/bin/kafka-server-start.sh /usr/local/kafka/config/server.properties
[program:kibana]
command = /usr/local/kibana/bin/kibana
[program:elasticsearch]
command = /usr/local/elasticsearch/bin/elasticsearch
autostart = true              # 被管理程序在supervisord啓動的時候也自動啓動
autorestart = true           #程序退出後自動重啓,可選值：[unexpected,true,false]，默認爲unexpected，表示進程意外殺死後才重啓
startsecs = 5                   #啓動5秒後沒有異常退出，就表示進程正常啓動了，默認爲1秒
startretries = 3                 #啓動失敗重試幾回，默認3次
user = elk                        #啓動用戶這個是爲了安全起見
redirect_stderr = true       #把stderr重定向到stdout，默認false
stdout_logfile=/data/logs/elk/logstash-shipper-std.log   #stdout 日誌文件大小，默認50MB  須要手動建立目錄，而且賦予elk的權限
stderr_logfile=/data/logs/elk/logstash-shipper-err.log     #stdout 日誌文件備份數，默認是10 須要手動建立目錄，而且賦予elk的權限

四，啓動驗證supervisor

#配置文件搞定了，能夠啓動supervisor了
supervisord -c /etc/supervisor/supervisord.conf

#supervisor 的管理是經過supervisorctl 管理，能夠經過命令帶參數形式例如：suervervisorctl shutdown ,也能夠經過進入交互模式進行管理，例如supervisorctl 回車，以後執行命令便可；
#參考啓動的程序
supervisor status
第一行是自定義的名字； 第二個是運行狀態，第三是pid ，第三行是啓動時間

#關閉supervisor
supervisorctl shutdown
#從新載入supervisor，從新載入supervisor，在這裏至關於重啓supervisor服務，裏面的服務也會跟着從新啓動
supervisor reload
#添加/刪除 要管理服務，當你修改了配置文件，能夠直接經過update 方式升級便可
supervisor update

#經過命令方式啓動全部服務或者單個服務
supervisorctl start all
supervisorctl start service_name
#關閉服務
supervisorctl stop all
supervisorctl stop service_name
#重啓全部服務或者單個服務
supervisorctl restart all
supervistorctl restart service_name
看圖說話web 管理界面：