Apache+tomcat+mod_jk+centos6.2负载均衡集群配置

本日志是整理的使用jk搭建apache和tomcat负载均衡集群，其中并没有涉及到session的复制，请查看日志的朋友留意。

使用两台服务器搭建集群，ip分别为：192.168.40.76 、192.168.40.77 其中76安装的是apache和tomcat作为集群分发，77只安装了tomcat，以下的详细步骤是以76为例编写，因为77只需要安装jdk和tomcat所以各位只需要参考jdk和tomcat安装方法即可。

1、准备下列程序安装包:（此安装包是本人使用的软件版本，系统版本为centos6.2，此种方法也在centos5.4搭建过没有问题，其他版本系统尚未测试过）

jdk-6u25-linux-i586.bin （注意：如果你的jdk是jdk-6u25-linux-i586-rpm.bin则需要在安装时作出调整，因为rpm包不能手动指定安装路径，jdk的rpm默认是安装到/usr/local目录下，且环境变量不用手动设置。如果是菜鸟尽量不要使用rpm包）
httpd-2.2.19.tar.gz
apache-tomcat-6.0.20.zip
tomcat-connectors-1.2.32-src.tar.gz (mod_jk 也叫 JK，这是一款 Apache/IIS 用来连接后台Tomcat的模块，支持集群和负载均衡。)

2、安装JDK
# cp jdk-6u25-linux-i586.bin /usr/local/java
# cd /usr/local/java
# chmod +x jdk-6u25-linux-i586.bin  (更改执行文件权限)
# ./jdk-6u25-linux-i586-rpm.bin   （开始安装jdk）
注：安装完成后悔在/usr/local/java的目录下生产一个JDK的文件夹。此目录就是java的home目录；但是如果你使用的是rpm包，则此java的home目录会自动生成在/urs/java下面

 

3、配置jdk环境变量
# vim /etc/profile

打开profile文件后定位到最后一行在unset i 上面加入以下内容：

                                                                                     
  export JAVA_HOME=/usr/java/jdk1.6.0_25
  export PATH=$JAVA_HOME/bin:$PATH:.
  export CLASSPATH=.:$JAVA_HOME/lib/dt.jar:$JAVA_HOME/lib/tools.jar

保存退出；

# source /etc/profile   （重置profle文件）

检查JDK是否安装成功。

# java -version

java version "1.6.0_25"

Java(TM) SE Runtime Environment (build 1.6.0_25-b06) Java HotSpot(TM) Server VM (build 20.0-b11, mixed mode)

如果看到以上JVM版本及相关信息，即安装成功！

4、安装Apache

# tar fvxz httpd-2.2.19.tar.gz
# cd httpd-2.2.19/
# ./configure --prefix=/usr/local/apache --enable-so --enable-mods-shared="proxy proxy_http proxy_ftp proxy_connect proxy_balancer headers"    (注：执行完成后，apache会被安装到目录 /usr/local/apache下)
# make
# make install
注：此处一般不会出问题。但是也不排除apache不能安装成功的可能性。我在第一次安装的时候因为系统再带软件太多，所以不能正常安装apache，各位朋友安装完成apache以后可以进入apache的安装目录的bin目录，执行 ./apachectl start  之后查看是否已经启动成功。

5、安装Tomcat
# tar zxvf apache-tomcat-6.0.20.tar.gz
# mv apache-tomcat-6.0.20 /usr/local/tomcat

6、安装tomcat-connectors
# tar zxvf tomcat-connectors-1.2.32-src.tar.gz
# cd tomcat-connectors-1.2.32-src/native/
# ./configure --with-apxs=/usr/local/apache/bin/apxs --with-java-home=/usr/local/java/jdk1.6.0_25/    （注：此处的apache和jdk路径是你jdk的真正安装路径。如果你的jdk不是安装到此路径。请安装实际情况修改） 
# make
# make install

注意：安装完成tomcat-connectors之后，查看apache目录下的modules目录，是否多出一些.so文件。这些文件即jk的配置信息文件

 

7、配置httpd.conf 文件
# vim /usr/local/apache/conf/httpd.conf

在文件最后添加

LoadModule jk_module modules/mod_jk.so

<IfModule jk_module>

JkWorkersFile conf/workers.properties

 JkMountFile conf/uriworkermap.properties

 JkLogFile logs/mod_jk.log

 JkLogLevel warn

 </IfModule>

 

8、创建并配置workers.properties文件

 

# vim /usr/local/apache/conf/workers.properties

worker.list=wlb , jkstatus    worker.worker1.port=8009   worker.worker1.host=192.168.40.76  worker.worker1.type=ajp13   worker.worker1.lbfactor=1   \#Define preferred failover node for worker1   \#worker.worker1.redirect=worker2    worker.worker2.port=8009   worker.worker2.host=192.168.40.77  worker.worker2.type=ajp13   worker.worker2.lbfactor=1   \# Disable worker2 for all requests except failover   \#worker.worker2.activation=disabled    worker.wlb.type=lb   worker.wlb.balance_workers=worker1,worker2    worker.jkstatus.type=status

注意：workers文件是我们自己创建的，其中worker1和worker2分别代表76和77服务器的tomcat

 

9、创建并配置uriworkermap.properties
# vim /usr/local/apache/conf/uriworkermap.properties
 

/admin/*=wlb   /manager/*=wlb   /jsp-examples/*=wlb   /servlets-examples/*=wlb

/cngi/*=wlb   /examples/*=wlb   /*.jsp=wlb   !/servlets-examples/*.jpeg=wlb    /jkmanager=jkstatus    !/*.gif=wlb   !/*.jpg=wlb   !/*.png=wlb   !/*.css=wlb   !/*.js=wlb   !/*.htm=wlb   !/*.html=wlb

注意：其中红色字体表明的cngi即我们的项目名称，各位如果配置自己的集群，需要在这里面加入你们的项目根目录，不然在集群中不能访问你们的项目。其中红色字体的含义是cngi目录下的所有文件均可访问。

前面有叹号的是表示在集群中，不能访问的文件，因为现在网上大多数转载，所以此处基本都一样，各位要注意，如果你照样复制过去，会导致这些css以及图片等文件，不能正常访问。所以大家搭建好集群后如果发现样式消失等问题，可以将里面的那些叹号全都去掉即可

 

10、编辑76服务器的tomcat server.xml文件

# vim /usr/local/tomcat/conf/server.xml

找到
<Engine name="Catalina" defaultHost="localhost">

修改为：
<Engine name="Catalina" defaultHost="localhost" jvmRoute="worker1">

在Engine标签下添加下面一段代码：注意其中的红色字体，需要修改为你自己的ip
<Cluster className="org.apache.catalina.ha.tcp.SimpleTcpCluster"  
                     channelSendOptions="8">

    <Manager className="org.apache.catalina.ha.session.DeltaManager"  
                       expireSessionsOnShutdown="false"  
                       notifyListenersOnReplication="true"/>

    <Channel className="org.apache.catalina.tribes.group.GroupChannel">
        <Membership className="org.apache.catalina.tribes.membership.McastService"  
                            address="228.0.0.4"  
                            port="45564"  
                            frequency="500"  
                            dropTime="3000"/>
        <Receiver className="org.apache.catalina.tribes.transport.nio.NioReceiver"  
                          address="192.168.40.76"
                          port="4000"  
                          autoBind="100"  
                          selectorTimeout="5000"  
                          maxThreads="6"/>

        <Sender className="org.apache.catalina.tribes.transport.ReplicationTransmitter">
            <Transport className="org.apache.catalina.tribes.transport.nio.PooledParallelSender"/>
        </Sender>
        <Interceptor className="org.apache.catalina.tribes.group.interceptors.TcpFailureDetector"/>
        <Interceptor className="org.apache.catalina.tribes.group.interceptors.MessageDispatch15Interceptor"/>
    </Channel>

    <Valve className="org.apache.catalina.ha.tcp.ReplicationValve" filter=""/>
    <Valve className="org.apache.catalina.ha.session.JvmRouteBinderValve"/>

    <Deployer className="org.apache.catalina.ha.deploy.FarmWarDeployer"  
                        tempDir="/tmp/war-temp/"  
                        deployDir="/tmp/war-deploy/"  
                        watchDir="/tmp/war-listen/"  
                        watchEnabled="false"/>

    <ClusterListener className="org.apache.catalina.ha.session.JvmRouteSessionIDBinderListener"/>
    <ClusterListener className="org.apache.catalina.ha.session.ClusterSessionListener"/>
</Cluster>
到此处，76服务器的所有配置全都已经完成

11、在77服务器按照上面的jdk和tomcat安装方法，安装之后，修改tomcat的server.xml

# vim /usr/local/tomcat/conf/server.xml

找到
<Engine name="Catalina" defaultHost="localhost">

修改为：
<Engine name="Catalina" defaultHost="localhost" jvmRoute="worker2">

在Engine标签下添加下面一段代码：注意其中的红色字体，需要修改为你自己的ip
<Cluster className="org.apache.catalina.ha.tcp.SimpleTcpCluster"  
                     channelSendOptions="8">

    <Manager className="org.apache.catalina.ha.session.DeltaManager"  
                       expireSessionsOnShutdown="false"  
                       notifyListenersOnReplication="true"/>

    <Channel className="org.apache.catalina.tribes.group.GroupChannel">
        <Membership className="org.apache.catalina.tribes.membership.McastService"  
                            address="228.0.0.4"  
                            port="45564"  
                            frequency="500"  
                            dropTime="3000"/>
        <Receiver className="org.apache.catalina.tribes.transport.nio.NioReceiver"  

                          address="192.168.40.77"
                          port="4000"  
                          autoBind="100"  
                          selectorTimeout="5000"  
                          maxThreads="6"/>

        <Sender className="org.apache.catalina.tribes.transport.ReplicationTransmitter">
            <Transport className="org.apache.catalina.tribes.transport.nio.PooledParallelSender"/>
        </Sender>
        <Interceptor className="org.apache.catalina.tribes.group.interceptors.TcpFailureDetector"/>
        <Interceptor className="org.apache.catalina.tribes.group.interceptors.MessageDispatch15Interceptor"/>
    </Channel>

    <Valve className="org.apache.catalina.ha.tcp.ReplicationValve" filter=""/>
    <Valve className="org.apache.catalina.ha.session.JvmRouteBinderValve"/>

    <Deployer className="org.apache.catalina.ha.deploy.FarmWarDeployer"  
                        tempDir="/tmp/war-temp/"  
                        deployDir="/tmp/war-deploy/"  
                        watchDir="/tmp/war-listen/"  
                        watchEnabled="false"/>

    <ClusterListener className="org.apache.catalina.ha.session.JvmRouteSessionIDBinderListener"/>
    <ClusterListener className="org.apache.catalina.ha.session.ClusterSessionListener"/>
</Cluster>

所有配置完全完成

启动 tomcat 和 apache

# /usr/local/tomcat/bin/startup.sh  # /usr/local/tomcat/bin/startup.sh  # /usr/local/apache/bin/apachectl start

用浏览器打开 http://192.168.40.76/examples/servlets/servlet/SessionExample 填写表单提交，然后关闭一台tomcat

Sessions Example    Session ID: 8114091612E32B0EF1F4FAB5DDF1A417.worker1   Created: Fri Aug 31 02:11:15 CST 2012  Last Accessed: Fri Aug 31 02:11:15 CST 2012  The following data is in your session:  laughing = jinxiao 

再次刷新表单，看提交的内容是否还在。(注意红色字体session id 处的变化)

Sessions Example    Session ID: 8114091612E32B0EF1F4FAB5DDF1A417.worker2   Created: Fri Aug 31 02:11:15 CST 2012  Last Accessed: Fri Aug 31 02:26:40 CST 2012  The following data is in your session:  laughing = jinxiao 

Aug 30th, 2012

注意此处的examples项目在worker.properties文件中是有配置的。所以才能正常访问。

  如果你的浏览器中按照上面的显示，说明集群配置已经成功。其中需要注意的是worker.properties文件的配置。在向集群中部署项目的时候一定要将项目的根目录添加到这个配置文件中。其中部署项目的时候只需要向两个服务器的tomcat中部署即可，apache中不用部署，而访问则访问apache。