使用docker+consul+nginx集成分佈式的服務發現與註冊架構

1、環境說明：

1.一臺虛擬機，該系統已經裝好了docker；

　　ip 192.168.10.224 虛擬網卡，與主機互通

　　操做系統rhel6 內核 2.6.32  64位

　　docker版本 1.7.1

2.一臺主機

　　ip 192.168.10.103

　　操做系統windows server 2008R  64位

　　ningx版本 1.8.0

2、思路及部署圖

consul-Server 是運行在docker裏的consul實例的server模式，能夠經過DNS或者HTTP接口使服務註冊並對容器進行健康狀態檢查，consul-registrator能夠經過監聽docker的start和stop事件來獲取啓動的實例的端口和ip配置，並經過consul-server提供的api註冊接口註冊到consul服務裏。這裏有一點須要注意，docker的restart方法貌似監視不到。另外比consul-registrator先啓動的實例，也是沒法監聽到的，因此在部署的時候須要注意一下啓動順序。這裏已經把最重要的一部分，自動監聽註冊docker實例的ip和端口完成了，接下來須要藉助consul-template將consul-server中註冊的服務拉去同步並寫到nginx配置中，再從新啓動nginx就能夠了。consul-template會實時監控consul-server中的服務和狀態，將新添加的服務和已經移除的服務，經過一個配置的模板寫到一個指定的文件中，這裏咱們指定的文件就是nginx的配置了。另外介紹一下ngingx，它是能夠熱啓動的，也就是在工做狀態下從新加載配置，主要是nginx啓動時會開啓倆個實例，一個master實例監控配置信息，另一個實例作負載和轉發。總體思路就是這樣，有須要瞭解其具體技術的，博客園裏有不少介紹，這裏就不具體再介紹了。

3、步驟

 1.配置docker阿里雲加速

sudo mkdir -p /etc/docker
sudo tee /etc/docker/daemon.json <<-'EOF'
{
  "registry-mirrors": ["https://96x7opee.mirror.aliyuncs.com"]
}
EOF
sudo systemctl daemon-reload
sudo systemctl restart docker

2.下載須要用到的docker鏡像,order

sudo docker pull registry.cn-hangzhou.aliyuncs.com/hw/consul-registrator:1.0.0

sudo docker pull registry.cn-hangzhou.aliyuncs.com/hw/consul-server:1.0.0

sudo docker pull registry.cn-hangzhou.aliyuncs.com/hw/order:1.0.0

3.啓動consul-server

docker run -d -p 8400:8400 -p 8500:8500 -p 8600:53/udp --name consul-server-node1  registry.cn-hangzhou.aliyuncs.com/hw/consul-server:1.0.0 -bootstrap -advertise 192.168.10.224

4.啓動consul-registrator

docker run -d --name=consul-registrator-node1 --net=host --volume=/var/run/docker.sock:/tmp/docker.sock  registry.cn-hangzhou.aliyuncs.com/hw/consul-registrator:1.0.0  consul://0.0.0.0:8500

 5.部署一個order鏡像

docker run -d -p 8088:80 --name order1 order

 6.配置模板，啓動consul-template

events {
    worker_connections  1024;
}


http {
    include       mime.types;
    default_type  application/octet-stream;
    sendfile        on;
    {{range services}} {{$name := .Name}} {{$service := service .Name}}
    upstream {{$name}} {
      {{range $service}}server {{.Address}}:{{.Port}} max_fails=3 fail_timeout=60 weight=1;
      {{else}}server 127.0.0.1:65535; # force a 502{{end}}
    } {{end}}

    server {
      listen 80 default_server;

      location / {
        root /usr/share/nginx/html/;
        index index.html;
      }

      location /stub_status {
        stub_status;
      }

    {{range services}} {{$name := .Name}}
      location /{{$name}}/ {
        proxy_pass http://{{$name}}/;
    }
    {{end}}
    }
}

 

F:\nginx-1.8.0\consul-template.exe  -consul-addr 192.168.10.224:8500 -template F:\nginx-1.8.0\conf\nginx-template.conf:F:\nginx-1.8.0\conf\nginx.conf:"nginx -s reload -p F:\\nginx-1.8.0"

 注意後面的nginx -s reload -p F:\\nginx-1.8.0要在-p後面加上nginx目錄位置不然會報日誌目錄沒法找到的錯誤。

 

這裏-consul-addr是剛纔咱們啓動的consul-server的地址和端口，咱們用網頁能夠打開有一個簡單的界面。-template中冒號前面填寫咱們的模板路徑，後面填寫輸出的位置。

7.啓動nginx

 啓動前先測試一下配置文件是否正確。注意先cd到nginx的目錄，不然就須要帶參數去運行，具體可參見官網的文檔。

F:\nginx-1.8.0>nginx.exe -t

在驗證沒有問題後，就能夠啓動了。由於我配置是監聽80端口，因此我先把IIS停掉了，否則這裏會出錯。

F:\nginx-1.8.0>start nginx.exe

 

至此，全部配置就已經完成。咱們在瀏覽器中輸入http://192.168.10.103/order/api/values 來查看一下是否能順利訪問。

OK，這表示整個流程已經走通。咱們來驗證一下，是否能在docker啓動新實例時自動註冊到咱們的nginx配置中。

 

首先咱們在虛擬機terminal中輸入 docker stop order1

在主機中瀏覽一下http://192.168.10.224:8500/ui咱們的consul服務有沒有將order移除

 

 能夠看到這個時候，order1是沒有的，咱們查看ngingx.conf能看到order也是被移除掉的。

瀏覽器訪問http://192.168.10.103/order/api/values，也發現不能訪問。

 咱們回來虛擬機上，在terminal裏輸入docker start order1，

再查看http://192.168.10.224:8500/ui，發現服務已經註冊了order，咱們在瀏覽器訪問http://192.168.10.103/order/api/values，發現又能正常訪問，nginx.conf配置中也從新把order節點加上。

 

 

本文原創，轉載請註明出處。