Nacos高可用集羣解決方案-Docker版本

文章主旨

本文目的是配置高可用的Nacos集羣html

架構圖

總體架構爲:Nginx + 3 x Nacos +高可用MySQLmysql

高可用MySQL使用主從複製結構的能夠參考Docker搭建MySQL主從集羣,基於GTIDnginx

文中對應的配置文件已經上傳Github,地址:https://github.com/hellxz/nacos-cluster-dockergit

測試環境

服務器OS 主機IP Docker版本
Ubuntu Server 18.04 LTS 192.168.87.133 18.09.6
Ubuntu Server 18.04 LTS 192.168.87.139 18.09.7
Ubuntu Desktop 18.04 LTS 192.168.87.135 18.09.7

爲了實現Nacos的高可用,至少須要三臺負載較小的服務器,能夠與其它服務共存github

注意事項web

  1. 這裏演示高可用MySQL地址爲:10.2.7.29:334010.2.7.29:3341,請自行替換
  2. 這裏的10.2.7.29是局域網,192.168.*是虛擬機網絡,經過虛擬機是能夠訪問局域網的
  3. Nacos初始化SQL這塊使用官方的便可,配置文件中不提供,默認認爲高可用MySQL已經執行了初始化nacos.sql,這個SQL請移步nacos.sql Github

配置文件目錄結構與說明

目錄說明

  • init.d/custom.properties - 官方提供的自選功能配置文件,Nacos節點均包含此目錄
  • nacos-1/docker-compose-nacos1.yml - 第一個Nacos節點的Docker-compose配置文件
  • nacos-2/docker-compose-nacos1.yml - 第二個Nacos節點的Docker-compose配置文件
  • nacos-3/docker-compose-nacos1.yml - 第三個Nacos節點的Docker-compose配置文件

除些以外,在每一個nacos-*目錄下邊,使用docker-compose命令啓動容器後,會建立出cluster-logs目錄,spring

我認爲最經常使用的應該是nacos.logsql

配置文件內容

133服務器的docker-compose-nacos1.ymldocker

version: '3' 
services:
  # nacos-server服務註冊與發現,配置中心服務    
  docker-nacos-server:
    image: nacos/nacos-server:1.0.1
    container_name: nacos-server-1
    ports:
      - "8848:8848"
      - "9555:9555"
    networks: 
      - nacos_net
    restart: on-failure
    privileged: true
    environment:
      PREFER_HOST_MODE: ip #若是支持主機名可使用hostname,不然使用ip,默認也是ip
      SPRING_DATASOURCE_PLATFORM: mysql #數據源平臺 僅支持mysql或不保存empty
      NACOS_SERVER_IP: 192.168.87.133 #多網卡狀況下,指定ip或網卡
      NACOS_SERVERS: 192.168.87.133:8848 192.168.87.139:8848 192.168.87.135:8848 #集羣中其它節點[ip1:port ip2:port ip3:port]
      MYSQL_MASTER_SERVICE_HOST: 10.2.7.29 #mysql配置,Master爲主節點,Slave爲從節點
      MYSQL_MASTER_SERVICE_PORT: 3340
      MYSQL_MASTER_SERVICE_DB_NAME: nacos
      MYSQL_MASTER_SERVICE_USER: root
      MYSQL_MASTER_SERVICE_PASSWORD: password
      MYSQL_SLAVE_SERVICE_HOST: 10.2.7.29
      MYSQL_SLAVE_SERVICE_PORT: 3341
      #JVM調優參數
      #JVM_XMS:  #-Xms default :2g
      #JVM_XMX:  #-Xmx default :2g
      #JVM_XMN:  #-Xmn default :1g
      #JVM_MS:   #-XX:MetaspaceSize default :128m
      #JVM_MMS:  #-XX:MaxMetaspaceSize default :320m
      #NACOS_DEBUG: n #是否開啓遠程debug,y/n,默認n
      #TOMCAT_ACCESSLOG_ENABLED: true #是否開始tomcat訪問日誌的記錄,默認false
    volumes:
      - ./cluster-logs/nacos1:/home/nacos/logs #日誌輸出目錄
      - ../init.d/custom.properties:/home/nacos/init.d/custom.properties #../init.d/custom.properties內包含不少自定義配置,可按需配置

networks:
  nacos_net:
    driver: bridge

139服務器的docker-compose-nacos2.ymltomcat

version: '3' 
services:
  # nacos-server服務註冊與發現,配置中心服務    
  docker-nacos-server:
    image: nacos/nacos-server:1.0.1
    container_name: nacos-server-2
    ports:
      - "8848:8848"
      - "9555:9555"
    networks: nacos_net
    restart: 
      - on-failure
    privileged: true
    environment:
      PREFER_HOST_MODE: ip #若是支持主機名可使用hostname,不然使用ip,默認也是ip
      SPRING_DATASOURCE_PLATFORM: mysql #數據源平臺 僅支持mysql或不保存empty
      NACOS_SERVER_IP: 192.168.87.139 #多網卡狀況下,指定ip或網卡
      NACOS_SERVERS: 192.168.87.133:8848 192.168.87.139:8848 192.168.87.135:8848 #集羣中其它節點[ip1:port ip2:port ip3:port]
      MYSQL_MASTER_SERVICE_HOST: 10.2.7.29 #mysql配置,Master爲主節點,Slave爲從節點
      MYSQL_MASTER_SERVICE_PORT: 3340
      MYSQL_MASTER_SERVICE_DB_NAME: nacos
      MYSQL_MASTER_SERVICE_USER: root
      MYSQL_MASTER_SERVICE_PASSWORD: password
      MYSQL_SLAVE_SERVICE_HOST: 10.2.7.29
      MYSQL_SLAVE_SERVICE_PORT: 3341
      #JVM調優參數
      #JVM_XMS:  #-Xms default :2g
      #JVM_XMX:  #-Xmx default :2g
      #JVM_XMN:  #-Xmn default :1g
      #JVM_MS:   #-XX:MetaspaceSize default :128m
      #JVM_MMS:  #-XX:MaxMetaspaceSize default :320m
      #NACOS_DEBUG: n #是否開啓遠程debug,y/n,默認n
      #TOMCAT_ACCESSLOG_ENABLED: true #是否開始tomcat訪問日誌的記錄,默認false
    volumes:
      - ./cluster-logs/nacos2:/home/nacos/logs #日誌輸出目錄
      - ../init.d/custom.properties:/home/nacos/init.d/custom.properties #../init.d/custom.properties內包含不少自定義配置,可按需配置

networks:
  nacos_net:
    driver: bridge

135服務器的docker-compose-nacos3.yml

version: '3' 
services:
  # nacos-server服務註冊與發現,配置中心服務    
  docker-nacos-server:
    image: nacos/nacos-server:1.0.1
    container_name: nacos-server-3
    ports:
      - "8848:8848"
      - "9555:9555"
    networks: 
      - nacos_net
    restart: on-failure
    privileged: true
    environment:
      PREFER_HOST_MODE: ip #若是支持主機名可使用hostname,不然使用ip,默認也是ip
      SPRING_DATASOURCE_PLATFORM: mysql #數據源平臺 僅支持mysql或不保存empty
      NACOS_SERVER_IP: 192.168.87.135 #多網卡狀況下,指定ip或網卡
      NACOS_SERVERS: 192.168.87.133:8848 192.168.87.139:8848 192.168.87.135:8848 #集羣中其它節點[ip1:port ip2:port ip3:port]
      MYSQL_MASTER_SERVICE_HOST: 10.2.7.29 #mysql配置,Master爲主節點,Slave爲從節點
      MYSQL_MASTER_SERVICE_PORT: 3340
      MYSQL_MASTER_SERVICE_DB_NAME: nacos
      MYSQL_MASTER_SERVICE_USER: root
      MYSQL_MASTER_SERVICE_PASSWORD: password
      MYSQL_SLAVE_SERVICE_HOST: 10.2.7.29
      MYSQL_SLAVE_SERVICE_PORT: 3341
      #JVM調優參數
      #JVM_XMS:  #-Xms default :2g
      #JVM_XMX:  #-Xmx default :2g
      #JVM_XMN:  #-Xmn default :1g
      #JVM_MS:   #-XX:MetaspaceSize default :128m
      #JVM_MMS:  #-XX:MaxMetaspaceSize default :320m
      #NACOS_DEBUG: n #是否開啓遠程debug,y/n,默認n
      #TOMCAT_ACCESSLOG_ENABLED: true #是否開始tomcat訪問日誌的記錄,默認false
    volumes:
      - ./cluster-logs/nacos3:/home/nacos/logs #日誌輸出目錄
      - ../init.d/custom.properties:/home/nacos/init.d/custom.properties #../init.d/custom.properties內包含不少自定義配置,可按需配置

networks:
  nacos_net:
    driver: bridge

Nacos共用的init.d/custom.properties,與官方保持一致,按需使用

#spring.security.enabled=false
#management.security=false
#security.basic.enabled=false
#nacos.security.ignore.urls=/**
#management.metrics.export.elastic.host=http://localhost:9200
# metrics for prometheus
management.endpoints.web.exposure.include=*

# metrics for elastic search
#management.metrics.export.elastic.enabled=false
#management.metrics.export.elastic.host=http://localhost:9200

# metrics for influx
#management.metrics.export.influx.enabled=false
#management.metrics.export.influx.db=springboot
#management.metrics.export.influx.uri=http://localhost:8086
#management.metrics.export.influx.auto-create-db=true
#management.metrics.export.influx.consistency=one
#management.metrics.export.influx.compressed=true

因爲如今把全部的配置文件放在一塊兒,而且每一個Nacos節點都須要一份init.d目錄,這裏就不單獨爲每一個nacos-*複製了,直接把文件夾整個複製過來就能夠了

啓動Nacos集羣

複製配置文件

複製nacos-cluster-docker目錄到以上三臺主機,上邊的配置文件已經修改好了

其對應關係爲:

  • 192.168.87.133 對應 nacos-1
  • 192.168.87.139 對應 nacos-2
  • 192.168.87.135 對應 nacos-3

啓動容器

分別在各主機上進入各自對應的nacos目錄中,啓動容器,命令以下:

133服務器

$ cd nacos-cluster-docker/nacos-1
$ docker-compose -f docker-compose-nacos1.yml up -d

139服務器

$ cd nacos-cluster-docker/nacos-2
$ docker-compose -f docker-compose-nacos2.yml up -d

135服務器

$ cd nacos-cluster-docker/nacos-3
$ docker-compose -f docker-compose-nacos3.yml up -d

查看日誌

查看日誌分別在對應的nacos-*目錄下,執行

tail -f cluster-logs/nacos*/nacos.log

訪問Nacos UI界面

這裏使用133服務器頁面進行展現下,

訪問http://192.168.87.133:8848/nacos,進入登陸頁面,默認的用戶名與密碼都是nacos

我這裏還原的sql是平時測試用的,這裏打下碼,咱們的關注點在 集羣管理 > 節點列表 這裏

這裏咱們看到Nacos集羣各節點已經正常了,LEADER與FOLLOWER已經選出,一切正常了

配置Nginx

除了Nacos集羣配置外,咱們在Spring Boot或Spring Cloud項目中使用的時候,只能指定一個URL指向Nacos服務端,這裏使用Nginx進行代理負載均衡

若是能夠的話,生產環境最佳實踐是使用一個域名指向Nginx,以後就算換Nginx主機,客戶端也無需修改配置文件,只須要使用域名指向一個新的Nginx的IP

列出最主要的配置

http{
	upstream nacos-cluster {
		server 192.168.87.133:8848;
		server 192.168.87.139:8848;
		server 192.168.87.135:8848;
	}
	server {
		listen 8848;
		location /{
			proxy_pass http://nacos-cluster;
		}
	}
}

啓動Nginx,使用代碼進行測試鏈接當前的Nginx所在主機IP:8848

這裏已經能夠看到服務正常註冊到集羣中了

遇到的問題

客戶端沒法註冊到集羣中

若是遇到有客戶端服務沒法鏈接到Nacos集羣中,請着重檢查下Nacos的堆內存與虛擬機的設置,最初我使用的默認的2G最大堆內存,虛擬機也分的2G內存,而後啓動服務時還能正常一小會,而後就開始有的服務顯示節點,有的不顯示列表,使用客戶端進行鏈接也沒法正常鏈接,提示Down Server response 之類 的提示

解決辦法:修改虛擬機內存大小,或修改Nacos堆內存配置

本文到此結束,若是對你有幫助,歡迎評論、推薦、關注三連:heart:​

本文系Hellxz學習與實踐文章,禁止布布扣、碼迷、愛碼網等第三方爬蟲網站爬取,轉載請在醒目位置註明出處:https://www.cnblogs.com/hellxz/p/nacos-cluster-docker.html

原文出處:https://www.cnblogs.com/hellxz/p/nacos-cluster-docker.html

相關文章
相關標籤/搜索