所謂集羣,就是把多臺服務器集合起來,對外提供一個接口訪問,對用戶來講徹底透明,經常使用的辦法就是前端放一個服務器,將用戶請求分發到不一樣的服務器,大體有如下幾種方案
1)採起DNS輪詢:將用戶的鏈接解析到不一樣的服務器上,這會產生一個問題,若是一個服務器宕掉,DNS沒法及時更新,就會出現問題
2)反向代理服務器:將用戶的鏈接轉發到不一樣的服務器上,這有兩種方式,一個是修改HTTP頭,讓用戶的鏈接轉到固定的服務器,之後再也不和代理服務器交互,這會修改用戶瀏覽器裏的地址,可能會不怎麼友好;若是不修改地址,用戶老是經過代理服務器轉接,這個代理服務器可能會成爲瓶頸。
3)MAC地址轉發,全部的服務器IP地址相同,經過設備指向不一樣的機器。
對於代理問題,會產生Session共享的問題,有一種辦法就是針對特定用戶固定在一臺服務器上,這樣就不存在Session共享的問題了,這種方法最簡單,可是其算法效率比較重要,須要本身選擇。還有就是將全部服務器的Session共享,好比放在數據庫裏、共享目錄裏或者MemCached裏等,可是這些實現方式都有必定的問題,好比保存的數據須要序列化、共享服務器會成爲系統薄弱點;再有就是將Session複製,讓全部的服務器保持相同的Session信息,這種狀況若是須要服務器過多,會嚴重的影響性能。
系統配置
CentOS 7,192.168.1.14,Apache 80, Nginx 808, Tomcat8 8081, Tomcat8 8082
可選的方案
1)Nginx:固定服務器訪問,這個很是簡單,修改nginx.conf,採用ip_hash指令,以下
http {
.............
upstream tomcat_server_pool{
ip_hash;
server 192.168.1.14:8081 weight=4 max_fails=2 fail_timeout=30s;
server 192.168.1.14:8082 weight=4 max_fails=2 fail_timeout=30s;
}
server {
listen 808;
server_name localhost;html
charset utf-8;前端
#access_log logs/host.access.log main;java
if (-d $request_filename)
{
rewrite ^/(.*)([^/]) http://$host/$1$2/ permanent;
}
location / {
#root html;
index index.html index.htm index.do;nginx
proxy_next_upstream http_502 http_504 error timeout invalid_header ;
proxy_pass http://tomcat_server_pool;
#proxy_set_header Host www.shiyq.com;
proxy_set_header X-Forwarded-For $remote_addr;
}
能夠看出nginx將808端口轉發到本機的8081/8082,建立一個spring mvc項目,虛擬目錄爲study,修改默認的文件,以下
HomeController.java,增長如下內容
@RequestMapping(value = "/index.do", method = RequestMethod.GET)
public String home_do(Locale locale, Model model,HttpServletRequest request) {
logger.info("Welcome home! The client locale is {}.", locale);
Date date = new Date();
DateFormat dateFormat = DateFormat.getDateTimeInstance(DateFormat.LONG, DateFormat.LONG);
String formattedDate = dateFormat.format(date);
String host_str = ", the host is " + request.getLocalAddr() + ":" + request.getLocalPort();
HttpSession session = request.getSession();
String check = request.getParameter("check");
if(check != null && !check.equals("")){
session.setAttribute("name", "石永強");
}
logger.info("the name in session is {}", (String)session.getAttribute("name"));
String test_Str = (String) session.getAttribute("host_str");
model.addAttribute("serverTime", formattedDate + ", the host is "+ host_str);
model.addAttribute("name",session.getAttribute("name"));
model.addAttribute("sessionId",session.getId());
return "home";
}
修改home.jsp,內容以下
<%@ taglib uri="http://java.sun.com/jsp/jstl/core" prefix="c" %>
<%@ page session="false" %>
<html>
<head>
<title>Home</title>
</head>
<body>
<h1>
Hello world!
</h1>web
<P> The time on the server is ${serverTime}. </P>
<P> The name in session is ${name}. </P>
<P> The session id is ${sessionId}. </P>
</body>
</html>
有時候會出現亂碼的問題,修改以下內容
在web.xml中加上以下
<filter>
<filter-name>Encoding</filter-name>
<filter-class>org.springframework.web.filter.CharacterEncodingFilter</filter-class>
<init-param>
<param-name>encoding</param-name>
<param-value>UTF-8</param-value>
</init-param>
<init-param>
<param-name>forceEncoding</param-name>
<param-value>true</param-value>
</init-param>
</filter>
<filter-mapping>
<filter-name>Encoding</filter-name>
<url-pattern>/*</url-pattern>
</filter-mapping>算法
上述配置適合解決method=post的問題,若是須要get方式支持中文,如form用get方式提交,或者點擊連接支持中文,則須要修改 Tomcat根目錄的 conf/server.xml文件中,找<Connector port="8080" />,在裏面加<Connector port="8080" uRIEncoding="utf-8" />
注意若是用於開發服務器,須要找到正確的位置,如Eclipse的Servers下的配置文件。
可是在地址欄輸入中文,仍然沒法支持,只能禁止這種方式。
在這種狀況下,訪問http://192.168.1.14:808/study/index.do?check=1
輸出爲
Hello world!
The time on the server is 2014年8月6日 上午11時39分48秒, the host is , the host is 192.168.1.14:8081. spring
The name in session is 石永強. 數據庫
The session id is C318A769671490E6822C04752499380F.
刷新以後,能夠看到訪問的是固定的服務器,這樣就能保證用戶Session不會出問題
2)使用MemCache
這須要Nginx的session插件,還須要tomcat的memcache插件,但是code.google.com訪問不了,雖然文檔不少,也實現不了,看之後吧。
只能採用Session複製的方式
3)tomcat 8配置cluster很是簡單,固然,這種集羣方式採起廣播的方式複製Session,當數量到了必定程度必然會引發廣播風暴,不適合大型系統
最簡單的設置方法:
A)將server.xml中<Cluster>標籤註釋去掉,默認以下
<Cluster className="org.apache.catalina.ha.tcp.SimpleTcpCluster"/>
B)在須要複製Session的web-app中的web.xml增長一行:<distributable/>
C)關掉防火牆:service iptables stop,若是使用的是firewalld,使用命令service firewalld stop
設置Cluster須要注意的地方(官方文檔)
a)全部的session屬性必須實現java.io.Serializable
b)去掉server.xml中Cluster元素的註釋
c)若是要定製valves,確保要設置ReplicationValve
d)確保在web.xml中增長<distributable/>
e)若是使用了mod_jk,在Engine中要設置jvmRoute屬性爲 workers.properties的worker名稱一致
f)確保全部的時間都相同,通過NTP服務器的同步
g)確保你的負載均衡設置爲會話粘連模式(sticky session mode)
在瀏覽器中訪問http://192.168.1.104:808/study/index.do,會發如今設置了ip_hash的狀況下,根據頁面提示,會發現老是訪問一個服務器,將這個tomcat關掉,再刷新頁面,就會發現自動訪問另外一個tomcat,而session信息不變。
並且,若是去掉了ip_hash模式,nginx會自動按順序依次訪問系統,但其session ID不變。
若是要更好的測試能夠,能夠分別訪問http://192.168.1.14:8081/study/index.do和http://192.168.1.14:8082/study/index.do,會發現是一致的session ID,並且還能夠訪問http://192.168.1.14:8081/study/index.do?check=1,這時候已經設置了session的屬性值,而後訪問http://192.168.1.14:8082/study/index.do,就能夠知道確實發生了Session複製。
若是須要更復雜的定製效果,能夠看一下文檔
對於防火牆的問題,能夠增長以下規則
iptables -A INPUT -i eth0 -d 224.0.0.4 -j ACCEPT
vim /etc/sysconfig/iptables
增長如下內容:
-A INPUT -p udp -m state --state NEW -m udp --dport 45564 -j ACCEPT
啓動防火牆
service iptables save
service iptables start
3)Apache+mod_jk+tomcat方案
a)下載apache開發包
yum install httpd-*
b)下載mod_jk
wget http://mirrors.cnnic.cn/apache/tomcat/tomcat-connectors/jk/tomcat-connectors-1.2.40-src.tar.gz
tar xvf tomcat-connectors-1.2.40-src.tar.gz
cd tomcat-connectors-1.2.40-src.tar.gz
cd native
./configure --with-apxs=/bin/apxs
make
make install
c)配置Apache
由於httpd.conf包含conf.module.d目錄下文件,在此目錄下新建00-add.conf,輸入如下內容
LoadModule jk_module modules/mod_jk.so #加載模塊
JkWorkersFile conf/worker.properties #加載mod_jk配置文件apache
JkMount /* worker3 #將根目錄轉發到worker3,worker3是一個負載均衡服務器,包含兩臺apache服務器vim
<IfModule dir_module>
DirectoryIndex index.jsp index.do
</IfModule>
d)在conf目錄下創建workder.properties文件,內容以下
worker.list = worker3
worker.worker1.type=ajp13
worker.worker1.host=localhost
worker.worker1.port=8009
worker.worker1.lbfactor=1
worker.worker1.connection_pool_timeout=600
worker.worker1.socket_keepalive=1
worker.worker1.socket_timeout=60
worker.worker2.type=ajp13
worker.worker2.host=localhost
worker.worker2.port=8010
worker.worker2.lbfactor=1
worker.worker2.connection_pool_timeout=600
worker.worker2.socket_keepalive=1
worker.worker2.socket_timeout=60
worker.worker3.type = lb
worker.worker3.balance_workers = worker1, worker2
能夠看出worker1對應本機的8009端口,即前面配置過的tomcat8-1,worker2對應本機的8010端口,即以前配置過的tomcat8-2服務器,worker3表明負載均衡服務器,包括兩個成員worker1,worker2
e)配置tomcat
vim /work/tomcat8-1/conf/server.xml
修改以下內容,在Engine標籤增長jvmRoute="worker1"
<Engine name="Catalina" defaultHost="localhost" jvmRoute="worker1">
vim /work/tomcat8-2/conf/server.xml
修改以下內容,在Engine標籤增長jvmRoute="worker2"
<Engine name="Catalina" defaultHost="localhost" jvmRoute="worker2">
f)重啓Apache和tomcat,瀏覽器中輸入http://192.168.1.14/study/index.do,能夠看到相似的內容
The time on the server is 2014年8月6日 下午05時21分04秒, the host is , the host is 192.168.1.14:80.
The name in session is .
The session id is AE132D73152E74C043ED64ED6F27707E.worker2. 這裏有一個有意思的事情,session id會增長一個i額後綴,即worker1或者workder2,應該是jvmRoute的做用,但本質來講仍是一個session 用mod_jk的一個問題是不知道訪問的是哪臺機器,由於顯示的apache的地址端口,經過session能夠知道究竟是哪臺機器。 以前咱們配置過nginx的均衡,瀏覽器輸入http://192.168.1.14:808/study/index.do 會看到session id去掉後綴確實是同樣的,並且運行http://192.168.1.14:808/study/index.do?check=1能夠看到session信息是共享的。 整體來講,用nginx配置負載均衡要容易的多,mod_jk要麻煩一些,tomcat的session複製也很是容易,只不過要記住配置防火牆,若是出現問題,要第一時間關掉防火牆,有可能就行了。