apache tomcat 负载均衡集群和session复制 基于jk

七月 05, 2019 | views
Comments 0

apache服务器和tomcat的连接方法其实有三种:JK、http_proxy和ajp_proxy，本文主要介绍最为常见的JK。

基于centos5.5 linux下配置：

1.安装tomcat7、apache2.2.22服务器及版本对应的JK

这里需要注意的是JK版本必须与apache服务器版本号对应，对应的linux的编译的jk版本可以到网上搜索 mod_jk.so去下载

注意点：如果你安装的apache是2.0.63版本或者说是2.0.X版本做好选用 mod_jk-1.2.26-httpd-2.0.61.so，如果是最新版2.2.22，可以选用最用mod_jk-1.2.31-httpd-2.2.x.so,总之不成功的时候自己去试试so，我就实验好多，一开始机器装的是2.0.63的apache让人崩溃的老版本.

下载对应的so文件到apache下的modules目录中，apache_home表示apache服务器安装目录.

2.配置apache服务器

2.1 httpd.conf文件

apache_home目录下的conf/httpd.conf文件中添加

复杂配置：

  1.  LoadModule jk_module modules/mod_jk-1.2.31-httpd-2.2.x.so  
  2. JkWorkersFile conf/workers.properties   
  3. JkMountFile conf/uriworkermap.properties  #加载workers的请求处理分配文件 可以不需要 
  4. JkLogFile logs/mod_jk.log #指定jk的日志输出文件 可以不需要 
  5. JkLogLevel warn #指定日志级别可以不需要 
  6. JkMount /* lbcontroller   #根据需要可以配置多个 设置apache分发器，/*表示apache将所有文件都由分发器lbcontroller 进行分发，你可以自行设置*.jsp,*.do等  
  7.  
  8.  uriworkermap.properties文件，内容如下 
  9. /*=lbcontroller                     #所有请求都由controller这个server处理 
  10. /jkstatus=status                   #所有包含jkstatus请求的都由status这个server处理 
  11. !/*.gif=lbcontroller                   #所有以.gif结尾的请求都不由controller这个server处理，以下几个都是一样的意思 
  12. !/*.jpg=lbcontroller 
  13. !/*.png=lbcontroller 
  14. !/*.css=lbcontroller 
  15. !/*.js=lbcontroller 
  16. !/*.htm=lbcontroller 
  17. !/*.html=lbcontroller  

 

简单配置：apache文件加 Include “/usr/local/apache/conf/mod.conf”

在”/usr/local/apache/conf/目录下创建mod.conf内容：


  1.  LoadModule jk_module modules/mod_jk-1.2.31-httpd-2.2.x.so  
  2. JkWorkersFile conf/workers.properties   
  3. #JkMount /*.jsp lbcontroller 
  4. #JkMount /*.do lbcontroller   
  5. JkMount /* lbcontroller   #根据需要可以配置多个 设置apache分发器，/*表示apache将所有文件都由分发器lbcontroller 进行分发，你可以自行设置*.jsp,*.do等 
2.2 workers.properties文件

在apache_home下conf目录中新建workers.properties文件，输入以下内容


  1. Xml代码 
  2.  worker.list=lbcontroller   
  3.  
  4. #Tomcat1实例配置   
  5. worker.tomcat1.host=localhost #此处可以是你的ip地址   
  6. worker.tomcat1.port=8009   
  7. worker.tomcat1.type=ajp13   
  8. #分发权重 值越大负载越大   
  9. worker.tomcat1.lbfactor = 1   
  10.  
  11. #Tomcat2实例配置   
  12. worker.tomcat2.host=localhost #此处可以是你的ip地址    
  13. worker.tomcat2.port=9009   
  14. worker.tomcat2.type=ajp13   
  15. #分发权重 值越大负载越大   
  16. worker.tomcat2.lbfactor = 1   
  17.  
  18. #负载均衡分发控制器   
  19. worker.lbcontroller.type=lb   
  20. worker.lbcontroller.balance_workers=tomcat1,tomcat2   
  21. worker.lbcontroller.sticky_session=True  

在这里 worker.list=lbcontroller，内容即为httpd.conf文件中的分发器名称。需要注意的内容是，tomcat实例名称



Xml代码：
 

  1. worker.tomcat1.host=....   
  2. ...   
  3. worker.tomcat2.host=....   
  4. ...   

在这里就是tomcat1和tomcat2必须与之后tomcat中的server.xml中jvmRoute值一致。



  1. <pre> 
  2. 更多的work.properties可以参考： 
  3. <pre  lang="java" line="1"> 
  4. worker.list=loadbalancer                        #定义负载均衡的名称   
  5. worker.loadbalancer.type=lb                     #定义负载均衡的类型，为lb   
  6. worker.loadbalancer.error_escalation_time=0     #切换错误状态时间   
  7. worker.loadbalancer.max_reply_timeouts=10   
  8. worker.loadbalancer.sticky_session=1            #1代表为true，0代表为false。   
  9. #worker.loadbalancer.sticky_session_force=true   
  10.  
  11. worker.loadbalancer.balance_workers=lb1,lb2 #负载均衡的工作者名称   
  12.  
  13. worker.lb1.reference=worker.template    #lb1参考worker.template工作模板   
  14. worker.lb1.host=localhost           #lb1的ip地址   
  15. worker.lb1.port=8009                #lb1端口，这里是ajp端口，不是网站端口   
  16. worker.lb1.activation=A                 #A：active模式 D：sticky模式 S：不使用   
  17.  
  18. worker.lb2.reference=worker.template   
  19. worker.lb2.host=localhost   
  20. worker.lb2.port=9009   
  21. worker.lb2.activation=A   
  22.  
  23. worker.template.type=ajp13                  #上面lb1,lb2参考下面的值worker.template，协议ajp13   
  24. worker.template.socket_connect_timeout=5000 #套接字连接超时为5000毫秒，默认为0   
  25. worker.template.socket_keepalive=true           #开启保持为真，默认为false   
  26. worker.template.ping_mode=A                 #使用cping/cpong模式，有C,P,I,A四个模式。A全选   
  27. worker.template.ping_timeout=10000          #探测cping/cpong超时间默认10000毫秒   
  28. worker.template.connection_pool_minsize=0       #连接池关闭最小时间   
  29. worker.template.connection_pool_timeout=600 #连接池600秒   
  30. worker.template.reply_timeout=300000            #答复超时300000毫秒   
  31. worker.template.recovery_options=3          #重试次数  

3.tomcat集群配置：配置每个tomcat目录下的server.xml文件，具体修改内容如下

3.1 Engine配置

修改前，Xml代码：<Engine name="Catalina" defaultHost="localhost">  

修改后，Xml代码：<Engine name="Catalina" defaultHost="localhost"  jvmRoute="tomcat1" >  

具体tomcat中jvmRoute的值根据在workers.properties的配置，注意IP地址、tomcat实例名称和jvmRoute值必须一一对应。

3.2 Connector配置

修改前，Xml代码：<Connector port="8009" protocol="AJP/1.3" redirectPort="8443" />  

修改后，Xml代码：<Connector port="9009" protocol="AJP/1.3" redirectPort="8443" /> 

这里tomcat的port值必须与在workers.properties中的port值一致。

3.3 Cluster配置

修改前，Xml代码  



  1. <!--  
  2. <Cluster className="org.apache.catalina.ha.tcp.SimpleTcpCluster" >  
  3. --> 

修改后，去掉注释并添加一些内容如下，Xml代码：



  1. <Cluster className="org.apache.catalina.ha.tcp.SimpleTcpCluster"  channelSendOptions="8"> 
  2.        <Manager className="org.apache.catalina.ha.session.DeltaManager"     
  3.                 expireSessionsOnShutdown="false"     
  4.                 notifyListenersOnReplication="true"/>      
  5.  
  6.        <Channel className="org.apache.catalina.tribes.group.GroupChannel">      
  7.          <Membership className="org.apache.catalina.tribes.membership.McastService"     
  8.                      address="228.0.0.4"     
  9.                      port="45564"     
  10.                      frequency="500"     
  11.                      dropTime="3000"/>      
  12.          <Receiver className="org.apache.catalina.tribes.transport.nio.NioReceiver"     
  13.                     address="auto"   
  14.                    port="4001"     
  15.                    autoBind="100"     
  16.                    selectorTimeout="5000"     
  17.                    maxThreads="6"/>      
  18.          <!-- timeout="60000"-->      
  19.          <Sender className="org.apache.catalina.tribes.transport.ReplicationTransmitter">      
  20.            <Transport className="org.apache.catalina.tribes.transport.nio.PooledParallelSender" />      
  21.          </Sender>      
  22.          <Interceptor className="org.apache.catalina.tribes.group.interceptors.TcpFailureDetector"/>      
  23.          <Interceptor className="org.apache.catalina.tribes.group.interceptors.MessageDispatch15Interceptor"/>     
  24.          <Interceptor className="org.apache.catalina.tribes.group.interceptors.ThroughputInterceptor"/>      
  25.        </Channel>      
  26.  
  27.        <Valve className="org.apache.catalina.ha.tcp.ReplicationValve"     
  28.               filter=""/>      
  29.        <Valve className="org.apache.catalina.ha.session.JvmRouteBinderValve"/>      
  30.  
  31.        <ClusterListener className="org.apache.catalina.ha.session.JvmRouteSessionIDBinderListener"/> 
  32.        <ClusterListener className="org.apache.catalina.ha.session.ClusterSessionListener"/>      
  33.      </Cluster> 

上述配置跟tomcat官方建议的配置，去掉了Xml代码：  



  1. <Deployer className="org.apache.catalina.ha.deploy.FarmWarDeployer"   
  2.                    tempDir="/tmp/war-temp/"   
  3.                    deployDir="/tmp/war-deploy/"   
  4.                    watchDir="/tmp/war-listen/"   
  5.                    watchEnabled="false"/>   

如果不去掉这部分，则tomcat启动会报"FarmWarDeployer can only work as host cluster subelement!." 

3.4 session复制配置,tomcat集群中的session管理，主要有两种方式：

1).粘性session

表示从同一窗口发来的请求都将有集群中的同一个tomcat进行处理。配置方式是在上面workers.properties文件中.Xml代码：



  1. worker.lbcontroller.sticky_session=True 

粘性session的好处在不会在不同的tomcat上来回跳动处理请求，但是坏处是如果处理该session的tomcat崩溃，那么之后的请求将由其他tomcat处理，原有session失效而重新新建一个新的session，这样如果继续从session取值，会抛出nullpointer的访问异常。

2).session复制

session复制是指tomcat彼此之间通过组播方式将session发到各个tomcat实例上，如果其中一个访问出错，则另外tomcat仍然具有有效的session内容，从而能正常接管其session。坏处是当tomcat实例很多，或者用户在session中有大量操作时，组播发送的信息量十分惊人。session复制配置则是在发布的web应用程序中的web.xml中添加Xml代码，此外,session复制所需的JDK必须是JDK 5.0及其以上版本。

4.测试

1) 先启动apache服务器httpd

2) 启动名为tomcat2的服务器 此处使用的tomcat7，新建的webapps功能里面即 test里面要带WEB-INF/classes 否则启动报错;

创建session.jsp文件：



  1.  <%@ page language="java" contentType="text/html; charset=ISO-8859-1" 
  2.     pageEncoding="ISO-8859-1"%> 
  3. <!DOCTYPE html PUBLIC "-//W3C//DTD HTML 4.01 Transitional//EN" "http://www.w3.org/TR/html4/loose.dtd"> 
  4. <html> 
  5. <head> 
  6. <meta http-equiv="Content-Type" content="text/html; charset=ISO-8859-1"> 
  7. <title>session-test</title> 
  8. </head> 
  9. <body> 
  10. <% 
  11. String s=session.getId(); 
  12. out.println("session id="+s); 
  13. System.out.println("session id="+s); 
  14. //Log loger=LogFactory.getLog("nice"); 
  15. //loger.info("session id="+s); 
  16. %> 
  17. </body> 
  18. </html>  

在浏览器中输入访问地址http://localhost/test/session.jsp查看输出，可以看到请求被转发到了tomcat2进行处理。

3)启动tomcat 1

可以发现，tomcat1启动后搜索到了tomcat2实例，并进行了session复制。在tomcat2的控制台也可以找到如下输出

4)关闭tomcat 2，后继续刷新url访问。tomcat1控制台中输出的session 依然与之前tomcat2中的一致，并且在session中保存的属性值仍然有效。




zend