Apache负载均衡+Tomcat集群

转自：http://ajava.org/course/server/13877.html

 

目标:
使用 apache 和 tomcat 配置一个可以应用的 web 网站，要达到以下要求：
1、  Apache 做为 HttpServer ，后面连接多个 tomcat 应用实例，并进行负载均衡。
2、  为系统设定 Session 超时时间，包括 Apache 和 tomcat
3、  为系统屏蔽文件列表，包括 Apache 和 tomcat
注：本例程以一台机器为例子，即同一台机器上装一个apache和4个Tomcat。

一、前期准备工作 ：
安装用的程序（前提保证已安装了JDK1.5以上的版本）
APAHCE 2.2.8下载：apache_2.2.8-win32-x86-no_ssl.msi
TOMCAT6.0.14下载：apache-tomcat-6.0.14.zip直接解压。

二、安装过程
APAHCE安装目录：D:/Apache。
四个TOMCAT目录：自行解压到(D:/Tomcat集群服务器/)下。分别为 tomcat6.0，tomcat6.01，tomcat6.02，tomcat6.03
这几个安装过程就不详细说明了。

三、配置
1、Apache配置
1.1、httpd.conf配置
修改APACHE的配置文件D:/Apache /conf/httpd.conf
将以下Module的注释去掉，这里并没有使用mod_jk.so进行apache和tomcat的链接，从2.X以后apache自身已集成了mod_jk.so的功能。只需简单的把下面几行去掉注释，就相当于以前用mod_jk.so比较繁琐的配置了。这里主要采用了代理的方法，就这么简单。

1. LoadModule proxy_module modules/mod_proxy.so    
2. LoadModule proxy_connect_module modules/mod_proxy_connect.so    
3. LoadModule proxy_ftp_module modules/mod_proxy_ftp.so    
4. LoadModule proxy_http_module modules/mod_proxy_http.so    
5. LoadModule proxy_ajp_module modules/mod_proxy_ajp.so    
6. LoadModule proxy_balancer_module modules/mod_proxy_balancer.so  

再找到<IfModule dir_module></IfModule>加上index.jsp修改成

1. <IfModule dir_module>   
2. DirectoryIndex index.html index.jsp   
3. </IfModule>  

1.1.1、  在最下面加入

1. ProxyRequests Off    
2. <proxy balancer: //cluster>    
3. BalancerMember ajp: //127.0.0.1:8009 loadfactor=1 route=jvm1   
4. BalancerMember ajp: // 127.0.0.1:9009 loadfactor=1 route=jvm2   
5. BalancerMember ajp: // 127.0.0.1:9001 loadfactor=1 route=jvm3   
6. BalancerMember ajp: // 127.0.0.1:9003 loadfactor=1 route=jvm4   
7. </proxy>  

上面的四个BalancerMember成员是我们配置的tomcat集群。后面会说明的。

1.2、httpd-vhosts.conf设置
接下来进行虚拟主机的设置。APACHE的虚拟主机设置如下：
首先要修改 conf/httpd.conf找到(#Include conf/extra/httpd-vhosts.conf)
把注释去掉。

1. # Virtual hosts   
2. Include conf/extra/httpd-vhosts.conf  

在文件（extra/httpd-vhosts.conf）最下面加入

1. < VirtualHost  *:80 >   
2.          ServerAdmin weijie@126.com   
3.          ServerName localhost   
4.          ServerAlias localhost   
5.          ProxyPass / balancer://cluster/  stickysession = jsessionid   nofailover = On   
6.          ProxyPassReverse / balancer://cluster/   
7. </ VirtualHost >   

其中的域名和路径根据你自己情况设置
然后再设置TOMCAT虚拟主机

2 配置 tomcat
2.1.  配置 server 的关闭
我们需要在一台机器上跑 4 个不同的 tomcat ，需要修改不同的 tomcat 的关闭口，避免出现端口被占用的情况。其中tomcat6.0用默认值，不修改。其他三个修改。在tomcat6.01/conf, tomcat6.02/conf下和tomcat6.03/conf下的 server.xml 中找到 server, 将：

1. <Server port= "8005"  shutdown= "SHUTDOWN" >   

改为

1. < Server   port = "XXXX"   shutdown = "SHUTDOWN" >    

XXXX 在这里表示不同的端口：我的其它三个 tomcat 分别使用 9005，8006 ， 9007

2.2. 配置 Engine
 把原来的配置注释掉，把下面一句去掉注释。并标明jvmRoute="jvm2".

1. < Engine   name = "Standalone"   defaultHost = "localhost"   jvmRoute = "jvm2" >           

 以下是原来的配置。

1. <!-- <Engine name= "Catalina"  defaultHost= "localhost" >  -->   

其他（tomcat6.02和tomcat6.03）也要同样 配置。注意：jvmRoute配置不要一样。

1. < Engine   name = "Standalone"   defaultHost = "localhost"   jvmRoute = "jvm3" >      
2. < Engine   name = "Standalone"   defaultHost = "localhost"   jvmRoute = "jvm4" >     

2.3. 配置 Connector
原来的默认配置。

1. <!-- Define an AJP 1.3 Connector on port 8009 -->   
2. < Connector   port = "8009"   protocol = "AJP/1.3"   redirectPort = "8443"   />   

这里是apache和tomcat链接的关键，前台apache就是通过AJP协议与tomcat进行通信的，以完成负载均衡的作用。也可以用HTTP协议。大家注意它们是如何连接通信的，上面的红色部分（port="8009"）就是连接的接口了。
把其他三个tomcat的<Connector port="XXX" />port分别改成与上面

1. < proxy  balancer://cluster >     
2.      #与tomcat6.0对应，route与 < Engine   jvmRoute = "jvm1" > 对应。   
3. BalancerMember ajp://127.0.0.1:8009  loadfactor = 1   route = jvm1   
4. #与tomcat6.01对应，route与 < Engine   jvmRoute = "jvm2" > 对应。   
5. BalancerMember ajp:// 127.0.0.1:9009  loadfactor = 1   route = jvm2   
6. #与tomcat6.02对应，route与 < Engine   jvmRoute = "jvm3" > 对应。   
7. BalancerMember ajp:// 127.0.0.1:9001  loadfactor = 1   route = jvm3   
8. #与tomcat6.03对应，route与 < Engine   jvmRoute = "jvm4" > 对应。   
9. BalancerMember ajp:// 127.0.0.1:9003  loadfactor = 1   route = jvm4   
10. </ proxy >   

中的端口对应，tomcat6.01 的ajp端口port:9009. tomcat6.02 的ajp端口port:9001。tomcat6.03 的ajp端口port:9003.一定要与上面的一致。同时也要把redirectPort的值改成唯一的，确保四个tomcat的都不一样。

2.5.配置Cluster(每个tomcat中都要修改)
原来的配置。

1. < Cluster   className = "org.apache.catalina.ha.tcp.SimpleTcpCluster" />   

修改为以下的代码：<Receiver port=”XX”/>port也要保证唯一性。

1. < Cluster   className = "org.apache.catalina.ha.tcp.SimpleTcpCluster"    channelSendOptions = "6" >     
2. < Manager   className = "org.apache.catalina.ha.session.BackupManager"     
3. expireSessionsOnShutdown = "false"     
4. notifyListenersOnReplication = "true"     
5. mapSendOptions = "6" />     
6. <!--    
7. < Manager   className = "org.apache.catalina.ha.session.DeltaManager"     
8. expireSessionsOnShutdown = "false"     
9. notifyListenersOnReplication = "true" />     
10. -- >     
11. < Channel   className = "org.apache.catalina.tribes.group.GroupChannel" >     
12. < Membership   className = "org.apache.catalina.tribes.membership.McastService"     
13. address = "228.0.0.4"     
14. port = "45564"     
15. frequency = "500"     
16. dropTime = "3000" />     
17. < Receiver   className = "org.apache.catalina.tribes.transport.nio.NioReceiver"     
18. address = "auto"     
19. port = "5001"     
20. selectorTimeout = "100"     
21. maxThreads = "6" />     
22. < Sender   className = "org.apache.catalina.tribes.transport.ReplicationTransmitter" >     
23. < Transport   className = "org.apache.catalina.tribes.transport.nio.PooledParallelSender" />     
24. </ Sender >     
25. < Interceptor   className = "org.apache.catalina.tribes.group.interceptors.TcpFailureDetector" />     
26. < Interceptor   className = "org.apache.catalina.tribes.group.interceptors.MessageDispatch15Interceptor" />     
27. < Interceptor   className = "org.apache.catalina.tribes.group.interceptors.ThroughputInterceptor" />     
28. </ Channel >     
29. < Valve   className = "org.apache.catalina.ha.tcp.ReplicationValve"     
30. filter = ".*/.gif;.*/.js;.*/.jpg;.*/.png;.*/.htm;.*/.html;.*/.css;.*/.txt;" />     
31. < Deployer   className = "org.apache.catalina.ha.deploy.FarmWarDeployer"     
32. tempDir = "/tmp/war-temp/"     
33. deployDir = "/tmp/war-deploy/"     
34. watchDir = "/tmp/war-listen/"     
35. watchEnabled = "false" />     
36. < ClusterListener   className = "org.apache.catalina.ha.session.ClusterSessionListener" />     
37. </ Cluster >   

这个设置是主要用以tomcat的集群。

四、启动服务，测试tomcat自带的例子
1、测试apache和tomcat协作。
先在每个tomcat中的/webapps/ROOT下的index.jsp下面加上以下的测试代码部分：(X代表不同的tomcat的输出不同的信息)，把index.html删除，以免影响测试效果。在最后面的加上.即</table></body>之间。

1. < %    
2.       System.out.println("tomcat6.0X  deal  with  request");   
3. % >   

然后再通过http:// 127.0.0.1来访问一下，就会出现大家熟悉的猫猫。
然后再通过分别访问
http:// 127.0.0.1:8080， http:// 127.0.0.1:9080，http:// 127.0.0.1:8081，http:// 127.0.0.1:9002它们访问的内容和上面的http:// 127.0.0.1是一样的。
这样就说明apache和TOMCAT整合成功！

2、测试均衡器
通过http:// 127.0.0.1多次访问，要想看到真正的效果，必须用一些压力测试工具，可用微软Microsoft Web Application Stress Tool进行简单压力测试，不然你靠不停刷新是体现不出来的，你只会在一个tomcat的控制台有输出结果。只用用压力测试工具模拟大量用户同时访问，你会发现四个tomcat控制台均有打出控制信息，说明均衡器工作正常。