構建Nginx+heartbeat高可用web站點

時間 2020-02-08

標籤構建 nginx+heartbeat nginx heartbeat 可用 web 站點欄目 Nginx 简体版

原文原文鏈接

1、準備實驗環境javascript

2、安裝nginx服務器（nginx1，nginx2）php

3、安裝FastCgi服務器css

4、安裝http服務器（用於靜態服務器）html

5、測試nginx是否實現負載均衡以及動靜分離java

6、配置Nginx的高可用服務node

1、準備實驗環境mysql

一、IP地址規劃nginx

VIP： 172.16.10.8web

nginx1:172.16.10.1sql

nginx2:172.16.10.2

php1:172.16.10.3

php2:172.16.10.4

web:172.16.10.6

二、網絡拓撲圖

三、服務器配置

nginx1服務器

sed -i 's@\(HOSTNAME=\).*@\1nginx1.xiaodong.com@g'  /etc/sysconfig/network
echo "172.16.10.2 nginx1.xiaodong.com nginx2" >> /etc/hosts
ssh-keygen -t rsa
ssh-copy-id .ssh/id_rsa.pub ngix2

nginx2服務器

sed -i 's@\(HOSTNAME=\).*@\1nginx2.xiaodong.com@g'  /etc/sysconfig/network
echo "172.16.10.1 nginx1.xiaodong.com nginx1" >> /etc/hosts
ssh-keygen -t rsa
ssh-copy-id .ssh/id_rsa.pub ngix2

2、安裝nginx服務器（nginx1，nginx2）

[root@nginx1 ~]# tar xf nginx-1.4.2.tar.gz -C /usr/local/
[root@nginx1 ~]# cd /usr/local/
[root@nginx1 local]# groupadd -r nginx
[root@nginx1 local]# useradd -r -g nginx nginx
[root@nginx1 nginx-1.4.2]# cd nginx-1.4.2/
[root@nginx1 nginx-1.4.2]# ./configure \
   --prefix=/usr \
   --sbin-path=/usr/sbin/nginx \
   --conf-path=/etc/nginx/nginx.conf \
   --error-log-path=/var/log/nginx/error.log \
   --http-log-path=/var/log/nginx/access.log \
   --pid-path=/var/run/nginx/nginx.pid  \
   --lock-path=/var/lock/nginx.lock \
   --user=nginx \
   --group=nginx \
   --with-http_ssl_module \
   --with-http_flv_module \
   --with-http_stub_status_module \
   --with-http_gzip_static_module \
   --http-client-body-temp-path=/var/tmp/nginx/client/ \
   --http-proxy-temp-path=/var/tmp/nginx/proxy/ \
   --http-fastcgi-temp-path=/var/tmp/nginx/fcgi/ \
   --http-uwsgi-temp-path=/var/tmp/nginx/uwsgi \
   --http-scgi-temp-path=/var/tmp/nginx/scgi \
   --with-pcre
[root@nginx1 nginx-1.4.2]# make && make install
[root@nginx1 nginx-1.4.2]# vim /etc/init.d/nginx
#!/bin/sh
#
# nginx - this script starts and stops the nginx daemon
#
# chkconfig:   - 85 15
# description:  Nginx is an HTTP(S) server, HTTP(S) reverse \
#               proxy and IMAP/POP3 proxy server
# processname: nginx
# config:      /etc/nginx/nginx.conf
# config:      /etc/sysconfig/nginx
# pidfile:     /var/run/nginx.pid
        
# Source function library.
. /etc/rc.d/init.d/functions
        
# Source networking configuration.
. /etc/sysconfig/network
        
# Check that networking is up.
[ "$NETWORKING" = "no" ] && exit 0
        
nginx="/usr/sbin/nginx"
prog=$(basename $nginx)
        
NGINX_CONF_FILE="/etc/nginx/nginx.conf"
        
[ -f /etc/sysconfig/nginx ] && . /etc/sysconfig/nginx
        
lockfile=/var/lock/subsys/nginx
        
make_dirs() {
   # make required directories
   user=`nginx -V 2>&1 | grep "configure arguments:" | sed 's/[^*]*--user=\([^ ]*\).*/\1/g' -`
   options=`$nginx -V 2>&1 | grep 'configure arguments:'`
   for opt in $options; do
       if [ `echo $opt | grep '.*-temp-path'` ]; then
           value=`echo $opt | cut -d "=" -f 2`
           if [ ! -d "$value" ]; then
               # echo "creating" $value
               mkdir -p $value && chown -R $user $value
           fi
       fi
   done
}
        
start() {
    [ -x $nginx ] || exit 5
    [ -f $NGINX_CONF_FILE ] || exit 6
    make_dirs
    echo -n $"Starting $prog: "
    daemon $nginx -c $NGINX_CONF_FILE
    retval=$?
    echo
    [ $retval -eq 0 ] && touch $lockfile
    return $retval
}
        
stop() {
    echo -n $"Stopping $prog: "
    killproc $prog -QUIT
    retval=$?
    echo
    [ $retval -eq 0 ] && rm -f $lockfile
    return $retval
}
        
restart() {
    configtest || return $?
    stop
    sleep 1
    start
}
        
reload() {
    configtest || return $?
    echo -n $"Reloading $prog: "
    killproc $nginx -HUP
    RETVAL=$?
    echo
}
        
force_reload() {
    restart
}
        
configtest() {
  $nginx -t -c $NGINX_CONF_FILE
}
        
rh_status() {
    status $prog
}
        
rh_status_q() {
    rh_status >/dev/null 2>&1
}
        
case "$1" in
    start)
        rh_status_q && exit 0
        $1
        ;;
    stop)
        rh_status_q || exit 0
        $1
        ;;
    restart|configtest)
        $1
        ;;
    reload)
        rh_status_q || exit 7
        $1
        ;;
    force-reload)
        force_reload
        ;;
    status)
        rh_status
        ;;
    condrestart|try-restart)
        rh_status_q || exit 0
            ;;
    *)
        echo $"Usage: $0 {start|stop|status|restart|condrestart|try-restart|reload|force-reload|configtest}"
        exit 2
esac
[root@nginx1 nginx-1.4.2]# chmod +x /etc/init.d/nginx
[root@nginx1 nginx-1.4.2]# service nginx start

注意：在安裝的過程當中可能會缺乏一些包，可是沒必要擔憂，只要使用yum install 就可用解決問題嘍

一、nginx支持php的配置（nginx1，nginx2）

[root@nginx1 ~]# vim /etc/nginx/fastcgi_params
fastcgi_param  GATEWAY_INTERFACE  CGI/1.1;
fastcgi_param  SERVER_SOFTWARE    nginx;
fastcgi_param  QUERY_STRING       $query_string;
fastcgi_param  REQUEST_METHOD     $request_method;
fastcgi_param  CONTENT_TYPE       $content_type;
fastcgi_param  CONTENT_LENGTH     $content_length;
fastcgi_param  SCRIPT_FILENAME    $document_root$fastcgi_script_name;
fastcgi_param  SCRIPT_NAME        $fastcgi_script_name;
fastcgi_param  REQUEST_URI        $request_uri;
fastcgi_param  DOCUMENT_URI       $document_uri;
fastcgi_param  DOCUMENT_ROOT      $document_root;
fastcgi_param  SERVER_PROTOCOL    $server_protocol;
fastcgi_param  REMOTE_ADDR        $remote_addr;
fastcgi_param  REMOTE_PORT        $remote_port;
fastcgi_param  SERVER_ADDR        $server_addr;
fastcgi_param  SERVER_PORT        $server_port;
fastcgi_param  SERVER_NAME        $server_name;
~

二、修改nginx配置文件（nginx1，nginx2），實現動靜分離並記錄訪問者的IP

orker_processes  2;
events {
    worker_connections  1024;
}
http {
    include       mime.types;
    default_type  application/octet-stream;
 proxy_cache_path  /data/cache  levels=1:2    keys_zone=STATIC:10m inactive=24h  max_size=1g;
    client_max_body_size 20m;
    client_header_buffer_size 16k;
    large_client_header_buffers 4 16k;
    tcp_nopush     on;
    gzip  on;
    gzip_min_length 1k;
    gzip_buffers 4 16k;
    gzip_proxied   any;
    gzip_http_version 1.1;
    gzip_comp_level 3;
    gzip_types text/plain application/x-javascript text/css application/xml;
    gzip_vary on;
    proxy_temp_path   /tmp/proxy_temp;
    proxy_cache_path  /tmp/proxy_cache levels=1:2 keys_zone=cache_one:500m inactive=1d max_size=3g;
    proxy_connect_timeout    50;
    proxy_read_timeout       600;
    proxy_send_timeout       600;
    proxy_buffer_size        128k;
    proxy_buffers           16 256k;
    proxy_busy_buffers_size 512k;
    proxy_temp_file_write_size 1024m;
    proxy_next_upstream error timeout invalid_header http_500 http_503 http_404 http_502 http_504;
     upstream  web {
                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                           
        server 172.16.10.3:9000   max_fails=3 fail_timeout=30s;
        server 172.16.10.4:9000    max_fails=3 fail_timeout=30s;
        server 172.16.10.1:80 backup;
     }
    server {
        listen       80;
        server_name  localhost;
        location / {
            root   html;
            index  index.html index.htm;
       }
        error_page   500 502 503 504  /50x.html;
        location = /50x.html {
            root   html;
        }
        location ~ \.php$ {
            root           /web/htdoc;
            fastcgi_pass   web;
            fastcgi_index  index.php;
            fastcgi_param  SCRIPT_FILENAME  /scripts$fastcgi_script_name;
            include        fastcgi_params;
            proxy_set_header X-Real-IP $remote_addr;
       }
                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                             
         location ~ \.(html|htm|gif|jpg|jpeg|bmp|png|ico|txt|js|css)$ {
             proxy_pass http://172.16.10.6;
            proxy_set_header X-Real-IP $remote_addr;
                proxy_cache            STATIC;
            proxy_cache_valid      200  1d;
            proxy_cache_valid      301 302 10m;
           # proxy_cache_vaild     any 1m;
            proxy_cache_use_stale  error timeout invalid_header updating
                                   http_500 http_502 http_503 http_504;
    }
    }
}

註釋：

第10行-18行：開啓代理緩存功能

第19行-26行：開啓壓縮功能

第44行-51行：轉發動態網頁

第50 行：修改頭部信息，使得後端web服務器能夠看到訪問端的地址

第53行—56行：轉發靜態網頁

3、安裝FastCgi服務器

一、php1與php2服務器

[root@php1 ~]#yum install gcc libxml2-devel openssl-devel bzip2-devel libmcrypt-devel  -y
[root@php1 ~]# tar xf php-5.4.19.tar.bz2
[root@php1 ~]# cd php-5.4.19
[root@php1 php-5.4.19]# ./configure --prefix=/usr/local/httpd/php --with-mysql=mysqlnd --with-openssl --with-mysqli=mysqlnd --enable-mbstring --with-freetype-dir --with-jpeg-dir --with-png-dir --with-zlib --with-libxml-dir=/usr --enable-xml  --enable-sockets --enable-fpm --with-mcrypt  --with-config-file-path=/etc --with-config-file-scan-dir=/etc/php.d --with-bz2
[root@php1 php-5.4.19]# make && make install

二、爲php提供配置文件（php1與php2）

[root@php1 php-5.4.19]# cp /usr/local/httpd/php/etc/php-fpm.conf.default/usr/local/httpd/php/etc/php-fpm.conf

[root@php1 php-5.4.19]# cp php.ini-production /etc/php.ini

三、爲php-fpm提供Sysv init腳本，並將其添加至服務列表（php1與php2）

[root@php1 php-5.4.19]# cp sapi/fpm/init.d.php-fpm /etc/rc.d/init.d/php-fpm[root@php1 php-5.4.19]# chmod +x /etc/rc.d/init.d/php-fpm
[root@php1 php-5.4.19]# chkconfig --add php-fpm
[root@php1 php-5.4.19]# chkconfig php-fpm on

四、修改配置文件（php1與php2）

[root@php1 ~]# vim /usr/local/httpd/php/etc/php-fpm.conf
listen = 172.16.10.3:9000

五、啓動服務（php1與php2）

root@php1 php-5.4.19]# service php-fpm start

六、建立php網址目錄（php1）

[root@php1 ~]# mkdir -pv /web/htdoc/
[root@php1 ~]# vim /web/htdoc/index.php
<h1> php1 </h1>
<?php
phpinfo();
?>

七、建立php網址目錄（php2）

[root@php2 ~]# mkdir -pv /web/htdoc/
[root@php2 ~]# vim /web/htdoc/index.php
<h1> php2 </h1>
<?php
phpinfo();
?>

4、安裝http服務器（用於靜態服務器）

[root@http ~]# yum install httpd -y
[root@http ~]#echo "<h1>stati html 172.16.10.6 </h1>" > >/var/www/html/index.html
[root@http ~]#service httpd start

5、測試nginx是否實現負載均衡以及動靜分離

一、訪問動態頁面測試

二、訪問靜態頁面測試

此時雖然實現了Nginx的負載均衡之後動靜分離，可是沒法保證nginx服務器的高可用，下面配置nginx的高可用

6、配置Nginx的高可用服務

一、安裝heartbeat（nginx1，nginx2）

[root@nginx1 ~]# yum install heartbeat -y

二、複製模塊文件

[root@nginx1 ha.d]# cd /usr/share/doc/heartbeat-3.0.4/
[root@nginx1 heartbeat-3.0.4]# cp authkeys ha.cf haresources  /etc/ha.d/

註釋：

authkeys #是節點之間的認證key文件

ha.cf #heartbeat的主配置文件

haresources #集羣資源管理配置文件

三、修改authkeys配置文件

[root@nginx1 ha.d]# openssl rand -hex 8>> /etc/ha.d/authkeys  生成隨機數
[root@nginx1 ha.d]# vim authkeys
auth 2
#1crc
#2sha1 HI!
#3md5 Hello!
2sha1 07cc87ff210e92e0

四、修改權限

[root@nginx1 ha.d]# chmod 600authkeys

五、修改主配置文件

[root@nginx1 ha.d]# vim ha.cf
logfile /var/log/ha-log
keepalive 2
deadtime 30
warntime 10
ucast eth0 172.16.10.2#指向nginx2的IP
node nginx1.xiaodong.com
node nginx2.xiaodong.com

六、修改資源配置文件

[root@nginx1 ~]# vim /etc/ha.d/haresources
ngnix1.xiaodong.com    172.16.10.8/16/eth0   nginx

注意：此處說明,nginx1爲主節點

七、複製配置文件到nginx2

[root@nginx1 ~]# cd /etc/ha.d/
[root@nginx1 ha.d]# scp -p authkeys  haresources ha.cf nginx2:/etc/ha.d/

八、啓動heartbeat服務

[root@nginx1 ~]# service heartbeat start
[root@nginx2 ~]# service heartbeat start

九、測試heartbeat與nginx是否結合

查看nginx1的啓動日誌

十、中止nginx1服務

[root@nginx1 ~]# service heartbeat stop

當nginx1停掉以後，查看nginx2日誌信息

以上信息反饋出來了，當nginx1 down掉以後，nginx2馬上檢測到，並啓動nginx服務，保證了nginx的高可用性。

本博客自此結束，望廣大博友多多指教！！！

相關標籤/搜索

每日一句

每一个你不满意的现在，都有一个你没有努力的曾经。