Linux下Apache与Tomcat的完全分布式集群配置(负载均衡

来源:互联网 发布:最新域名 编辑:程序博客网 时间:2024/05/29 13:30

Linux下Apache与Tomcat的完全分布式集群配置(负载均衡)

分类: Linux/Unix操作系统 分布式集群 中间件技术 801人阅读 评论(4)收藏 举报

最近公司要给客户提供一套集群方案,项目组采用了Apache和Tomcat的集群配置,用于实现负载均衡的实现。

由于以前没有接触过Apache,因此有些手生,另外在网上搜寻了很多有关这方面的集群文章,但是没有一篇是可以从头到尾,配置可以成功的,或者是文件不全,解释不清等。

博主本人希望借这个机会,自己总结一份,用于分享使用。

本集群采用ajp的方式来实现,方法简单易懂。实际上对于这种集群的配置,无非就是把需要的软件等下载后,修改相应的配置文件,最后依次启动即可。

这里我把需要的应用软件和相应的配置文件贴出,大家可以对比自己的文件是否匹配。


事先说明下,本人做的是完全分布式集群,也就是真正的在不同的虚拟机上做的操作。并不是在同一台机器上做的,因此如果各位在同一台机器上做该操作的话,不建议采纳。

三台机器:

系统:CentOS 5.x

主节点:192.168.1.101

子节点1:192.168.1.151

子节点2:192.168.1.152


1. 需要用到的软件:(具体安装步骤无需描述)

 apache 2.2.25  安装在主节点上     /opt/apache2

apache-tomcat-6.0.37 安装在子节点1和子节点2上   /opt/apache-tomcat-6.0.37


2.配置文件

apache安装后,需要注意三个地方需要修改:

1)ServerName localhost:80  该localhost为本地主机名,该主机名为hosts文件所显示的名字,配置错误的话,会出现   httpd:Could not reliably determine.......错误。

2)在文件的最后需要配置以下文本,用于控制集群的成员。

[html] view plaincopyprint?
  1. ProxyPass /images !   
  2. ProxyPass /css !   
  3. ProxyPass /js !  
  4.   
  5. ProxyRequests Off  
  6. ProxyPass /test balancer://mycluster/ stickysession=JSESSIONID  
  7.   
  8. ProxyPassReverse /test balancer://mycluster/ stickysession=JSESSIONID  
  9. <Proxy balancer://mycluster>  
  10.      BalancerMember ajp://192.168.1.152:8009/test/ loadfactor=1   
  11.      BalancerMember ajp://192.168.1.151:8009/test/ loadfactor=1  
  12. </Proxy>  

该配置为Apache的反向代理,用于通过apache去访问tomcat项目。test为博主的项目Context,两个BalanceMember是集群中的成员。8009端口是tomcat的ajp端口名。

上述修正:昨天在进行试验的时候疏忽了这块,今天在公司试验的时候才发现。大家一定要注意下,BalancerMember一行中的route=worker1和route=worker2都不能加上,一旦加上的话,就不会通过apache的指定去进行分布的访问了,因此这里一定要去掉。否则的话,只会在一个tomcat容器中进行操作。

最后的下面balancer-manager是用于查看负载均衡运行情况的路径配置。

该文本需要添加在

[plain] view plaincopyprint?
  1. <IfModule ssl_module>  
  2. SSLRandomSeed startup builtin  
  3. SSLRandomSeed connect builtin  
  4. </IfModule>  
的上面。

3)最后还需要在

[html] view plaincopyprint?
  1. ProxyPass /images !   
  2. ProxyPass /css !   
  3. ProxyPass /js !  
的上面加入下面配置:

[plain] view plaincopyprint?
  1. <Location /server-status>  
  2.      SetHandler balancer-manager  
  3.      Order Deny,Allow  
  4.      Deny from all  
  5.      Allow from all  
  6. </Location>  
  7.   
  8. <Location /balancer-manager>  
  9.   
  10.      SetHandler balancer-manager  
  11.      Order Deny,Allow  
  12.      Deny from all  
  13.      Allow from all  
  14.   
  15. </Location>  

有的朋友在网上找到的文章,配置的都正确,但是最后发现服务都可以启动,并且可以访问,但是没有实现负载均衡的效果,只是在单个节点上运行。

本人也是遇到了这种问题,最后找了很长时间,才发现需要引入上面配置。

至此为止,apache的配置就完成了,下面进行tomcat的配置。


3.Tomcat配置文件

首先说一点,Tomcat也只是配置一个文件,就是server.xml。并且里面的端口无需改动,因为是在真正的分布式中来实现的。只需要修改一个地方,就是Engine节点。

在之前的Engine节点上,加入一个属性jvmRoute,值是刚才我们提到的worker1或worker2,具体配置如下:

[html] view plaincopyprint?
  1. <Engine name="Catalina" defaultHost="localhost" jvmRoute="worker2">  
  2.   
  3.       <!--For clustering, please take a look at documentation at:  
  4.           /docs/cluster-howto.html  (simple how to)  
  5.           /docs/config/cluster.html (reference documentation) -->  
  6.         
  7.       <Cluster className="org.apache.catalina.ha.tcp.SimpleTcpCluster"  
  8.     channelSendOptions="8">  
  9.         
  10.      <Manager className="org.apache.catalina.ha.session.DeltaManager"  
  11.                    expireSessionsOnShutdown="false"  
  12.                    notifyListenersOnReplication="true"/>  
  13.   
  14.           <Channel className="org.apache.catalina.tribes.group.GroupChannel">  
  15.             <Membership className="org.apache.catalina.tribes.membership.McastService"  
  16.                         address="228.0.0.4"  
  17.                         port="45564"  
  18.                         frequency="500"  
  19.                         dropTime="3000"/>  
  20.             <Receiver className="org.apache.catalina.tribes.transport.nio.NioReceiver"  
  21.                       address="192.168.1.152"  
  22.                       port="4000"  
  23.                       autoBind="100"  
  24.                       selectorTimeout="5000"  
  25.                       maxThreads="6"/>  
  26.   
  27.             <Sender className="org.apache.catalina.tribes.transport.ReplicationTransmitter">  
  28.               <Transport className="org.apache.catalina.tribes.transport.nio.PooledParallelSender"/>  
  29.             </Sender>  
  30.             <Interceptor className="org.apache.catalina.tribes.group.interceptors.TcpFailureDetector"/>  
  31.             <Interceptor className="org.apache.catalina.tribes.group.interceptors.MessageDispatch15Interceptor"/>  
  32.           </Channel>  
  33.   
  34.           <Valve className="org.apache.catalina.ha.tcp.ReplicationValve" filter=""/>  
  35.           <Valve className="org.apache.catalina.ha.session.JvmRouteBinderValve"/>  
  36.   
  37.     <Deployer className="org.apache.catalina.ha.deploy.FarmWarDeployer"  
  38.                     tempDir="/tmp/war-temp/"  
  39.                     deployDir="/tmp/war-deploy/"  
  40.                     watchDir="/tmp/war-listen/"  
  41.                     watchEnabled="false"/>  
  42.           <ClusterListener className="org.apache.catalina.ha.session.JvmRouteSessionIDBinderListener"/>  
  43.           <ClusterListener className="org.apache.catalina.ha.session.ClusterSessionListener"/>  
  44.      </Cluster>   

上面的配置是我们提到的worker2的配置,是在子节点2上配置的,如果在子节点1上,则只需要将其改成worker1,另外还要把Receiver的address修改成当前所在机器的IP地址。

最后把所要操作的项目放到tomcat的webapp下,另外项目本身的web.xml文件中,需要引入<distributable/>元素。

至此为止,Tomcat的配置也完成了。


4.启动测试

启动的顺序在网上看到五花八门,本人自己测试是需要先启动Apache,然后依次启动Tomcat子节点。

测试的地址  http://192.168.1.101:80/test

测试查看的负载均衡情况地址   http://192.168.1.101:80/balancer-manager


测试方法:我们可以在项目的index.jsp文件最后加入一段打印,如:

[plain] view plaincopyprint?
  1. <%  
  2.       system.out.println("==============");  
  3. %>  

这样的话,我们开启两个tomcat的控制台去观察,如果在通过apache访问web地址以后,两个节点的控制台是交替打印的,则说明配置成功。


以上是个人的总结,本人也是第一次配置该集群,如有不成熟的地方,请下面留言。




原创粉丝点击