apache2 JK tomcat6 集群 负载均衡

最开始打算用apache2自带的mod_jk方式来配置cluster，参考了网上的一些文章也看了官方的doc，最后做到session粘连和session复制都可以，唯独失效转移不能实现。当tomcat1突然shutdown后不能自动转移到tomcat2上，需要手动的刷新才能转移到tomcat2上，郁闷死了。

 

apache2的mod_jk配置见下面：(都在httpd.conf 里配置，未曾开启httpd-vhost.conf)   [tomcat的配置稍后就有]

LoadModule proxy_module modules/mod_proxy.so
LoadModule proxy_ajp_module modules/mod_proxy_ajp.so
LoadModule proxy_balancer_module modules/mod_proxy_balancer.so
LoadModule proxy_connect_module modules/mod_proxy_connect.so
LoadModule proxy_ftp_module modules/mod_proxy_ftp.so
LoadModule proxy_http_module modules/mod_proxy_http.so

......
<IfModule dir_module>
    DirectoryIndex index.html index.jsp
</IfModule>

......
<VirtualHost *:80>
  ServerName localhost
  ProxyRequests Off 
  <proxy balancer://cluster>
  BalancerMember ajp://localhost:8009 loadfactor=1 route=jvm1
  BalancerMember ajp://localhost:9009 loadfactor=1 route=jvm2
  </proxy>
  ProxyPass / balancer://cluster/ stickysession=JSESSIONID nofailover=Off
  ProxyPassReverse / balancer://cluster/
  ErrorLog "logs/my_error.log"
  CustomLog "logs/my_access.log" common
</VirtualHost>

//这样的配置可以实现session粘连，但不能失效转移。 
//如果开启httpd-vhost.conf并把virtualhost移入(出去proxy部分)
//就不能session粘连了，就变成普通的负载均衡了且不能失效转移

 

以上是有问题的配置，如果哪位清楚的话请告知小弟，感激不尽！

 

 

好了，说了一堆该说ok的做法啦!

 

 

采用 apache2 + jk + tomcat6 来配置 

 

apache2的httpd.conf的最后一行加入:

include "D:\AboutJava\httpd\conf\mod_jk.conf"

  在同级目录下建立mod_jk.conf并添加以下内容:

LoadModule jk_module modules/mod_jk-1.2.31-httpd-2.2.3.so   
JkWorkersFile conf/workers.properties
JkMount /* controller

 再建立worders.properties并添加以下内容:

ps=\
worker.list = controller


worker.jvm1.port=8009
worker.jvm1.host=localhost
worker.jvm1.type=ajp13
worker.jvm1.lbfactor = 1

worker.jvm2.port=9009
worker.jvm2.host=localhost
worker.jvm2.type=ajp13
worker.jvm2.lbfactor = 1


worker.controller.type=lb
worker.controller.balance_workers=jvm1,jvm2
worker.controller.sticky_session=1

别忘记把copy jk插件到modules目录下

 

apache2的配置到此结束，下面该是tomcat6的了。

 

准备两个tomcat6，暂时命名为jvm1和jvm2

 

修改jvm1的server.xml

<Server port="8005



" shutdown="SHUTDOWN">
......

<Connector port="8090



" protocol="HTTP/1.1" 
               connectionTimeout="20000" 
               redirectPort="8443



" />
......
<Connector port="8009" protocol="AJP/1.3" redirectPort="8443



" />
......
<Engine name="Catalina" defaultHost="localhost" jvmRoute="jvm1



">
......

<Cluster className="org.apache.catalina.ha.tcp.SimpleTcpCluster"
channelSendOptions="8">
 
<Manager className="org.apache.catalina.ha.session.DeltaManager"
expireSessionsOnShutdown="false"
notifyListenersOnReplication="true"/>
 
<Channel className="org.apache.catalina.tribes.group.GroupChannel">
<Membership className="org.apache.catalina.tribes.membership.McastService"
bind="127.0.0.1"  <!--因为本机有vpn，所以要bind下。如果你没有的话可以不用加bind-->
address="228.0.0.4"
port="45564"
frequency="500"
dropTime="3000"/>
<Receiver className="org.apache.catalina.tribes.transport.nio.NioReceiver"
address="auto"
port="4000



"
autoBind="100"
selectorTimeout="5000"
maxThreads="6"/>
 
<Sender className="org.apache.catalina.tribes.transport.ReplicationTransmitter">
<Transport className="org.apache.catalina.tribes.transport.nio.PooledParallelSender"/>
</Sender>
<Interceptor className="org.apache.catalina.tribes.group.interceptors.TcpFailureDetector"/>
<Interceptor className="org.apache.catalina.tribes.group.interceptors.MessageDispatch15Interceptor"/>
</Channel>
 
<Valve className="org.apache.catalina.ha.tcp.ReplicationValve"
filter=""/>
<Valve className="org.apache.catalina.ha.session.JvmRouteBinderValve"/>
 
 
<ClusterListener className="org.apache.catalina.ha.session.JvmRouteSessionIDBinderListener"/>
<ClusterListener className="org.apache.catalina.ha.session.ClusterSessionListener"/>
</Cluster>

 

jvm2的server.xml也是类似的修改，主要是port的修改:

<Server port="8006



" shutdown="SHUTDOWN">
......

<Connector port="8091



" protocol="HTTP/1.1" 
               connectionTimeout="20000" 
               redirectPort="9443



" />
......
<Connector port="9009" protocol="AJP/1.3" redirectPort="9443



" />
......
<Engine name="Catalina" defaultHost="localhost" jvmRoute="jvm2



">
......

<Cluster className="org.apache.catalina.ha.tcp.SimpleTcpCluster"
channelSendOptions="8">
 
<Manager className="org.apache.catalina.ha.session.DeltaManager"
expireSessionsOnShutdown="false"
notifyListenersOnReplication="true"/>
 
<Channel className="org.apache.catalina.tribes.group.GroupChannel">
<Membership className="org.apache.catalina.tribes.membership.McastService"
bind="127.0.0.1"  <!--因为本机有vpn，所以要bind下。如果你没有的话可以不用加bind-->
address="228.0.0.4"
port="45564"
frequency="500"
dropTime="3000"/>
<Receiver className="org.apache.catalina.tribes.transport.nio.NioReceiver"
address="auto"
port="4001



"
autoBind="100"
selectorTimeout="5000"
maxThreads="6"/>
 
<Sender className="org.apache.catalina.tribes.transport.ReplicationTransmitter">
<Transport className="org.apache.catalina.tribes.transport.nio.PooledParallelSender"/>
</Sender>
<Interceptor className="org.apache.catalina.tribes.group.interceptors.TcpFailureDetector"/>
<Interceptor className="org.apache.catalina.tribes.group.interceptors.MessageDispatch15Interceptor"/>
</Channel>
 
<Valve className="org.apache.catalina.ha.tcp.ReplicationValve"
filter=""/>
<Valve className="org.apache.catalina.ha.session.JvmRouteBinderValve"/>
 
 
<ClusterListener className="org.apache.catalina.ha.session.JvmRouteSessionIDBinderListener"/>
<ClusterListener className="org.apache.catalina.ha.session.ClusterSessionListener"/>
</Cluster>

 

 

在看tomcat6的cluster文档和网上的一些教程都要在server.xml里加入:

<Deployer className="org.apache.catalina.ha.deploy.FarmWarDeployer"
                    tempDir="/tmp/war-temp/"
                    deployDir="/tmp/war-deploy/"
                    watchDir="/tmp/war-listen/"
                    watchEnabled="false"/>

 加入这个的话再run tomcat6时  你会在cmd里有一个警告，这个主要是集群文件同步用的，但我不太懂，直接把这段去掉就ok了.

 

最后是web项目啦，自己随便写一个就ok了，别忘记在WEB-INF/web.xml里加上<distributable/>

 

 

现在上传一个写好了的例子，在WEB-INF/classes下有个config.properties ，自己改下那个value就ok

这样好证明两个jvm，然后启动apache 和2个tomat  看看cmd的输出吧。

为了证明能失效转移，特意让后台thread 休眠 10秒，这样你就有机会突然shutdown一个tomcat，然后你就可以看到另一个tomcat自动接管tomcat1的任务。

 

注：在文章里有些span 是特意标记为红色的部分，不知道怎么会回事，有点显示不正常.

 

 

workers.propertes修改下：

......前面的一样
worker.controller.sticky_session=0  #关闭sticky
worker.controller.sticky_session_force=true #当某个jvm shutdown后自动转移到另一个jvm
#此时还用上面的server.xml的话就有问题了，不能实现session复制

 新的server.xml:

......
<Cluster className="org.apache.catalina.ha.tcp.SimpleTcpCluster"
                 channelSendOptions="6">

          <Manager className="org.apache.catalina.ha.session.BackupManager"
                   expireSessionsOnShutdown="false"
                   notifyListenersOnReplication="true"
                   mapSendOptions="6"/>
          <!--
          <Manager className="org.apache.catalina.ha.session.DeltaManager"
                   expireSessionsOnShutdown="false"
                   notifyListenersOnReplication="true"/>
          -->        
          <Channel className="org.apache.catalina.tribes.group.GroupChannel">
            <Membership className="org.apache.catalina.tribes.membership.McastService"
						bind="127.0.0.1"
                        address="228.0.0.4"
                        port="45564"
                        frequency="500"
                        dropTime="3000"/>
            <Receiver className="org.apache.catalina.tribes.transport.nio.NioReceiver"
                      address="auto"
                      port="4001"
                      selectorTimeout="100"
                      maxThreads="6"/>

            <Sender className="org.apache.catalina.tribes.transport.ReplicationTransmitter">
              <Transport className="org.apache.catalina.tribes.transport.nio.PooledParallelSender"/>
            </Sender>
            <Interceptor className="org.apache.catalina.tribes.group.interceptors.TcpFailureDetector"/>
            <Interceptor className="org.apache.catalina.tribes.group.interceptors.MessageDispatch15Interceptor"/>
            <Interceptor className="org.apache.catalina.tribes.group.interceptors.ThroughputInterceptor"/>
          </Channel>

          <Valve className="org.apache.catalina.ha.tcp.ReplicationValve"
                 filter=".*\.gif;.*\.js;.*\.jpg;.*\.png;.*\.htm;.*\.html;.*\.css;.*\.txt;"/>


          <ClusterListener className="org.apache.catalina.ha.session.ClusterSessionListener"/>
        </Cluster>

 

注意两个jvm的port别冲突就可以了 ，如果有两台机器的话就无所谓了，ip对了就可以!