Apache Tomcat 负载均衡配置参考

要提高Java应用服务器的扩展性和可用性, 采用前端Web服务器来进行Load-Balance负载均衡是一种极为靠谱的方式. 这种方式在用户数量和应用负载进行增长的时候很容易扩展, 也能够在一个机器硬件(网卡,硬盘等)出问题被动down机或者管理员主动down机进行维护的情况下保证系统可用. 架构师和开发人员越早了解这种方式并在实际应用中使用, 会对自己的Web应用越有信心.

 

下面我们用最简单可行的方式(一台Windows下Apache 2.2.x + Tomcat 6.0.18), 让大家对这种配置有一个直接的了解, 配置虽然是在WindowsXP上完成的, 但对Debian Linux下的情况也进行介绍, 你会发现, 在Linux下做这个工作只会更加省心, 毕竟Apache和Tomcat和*nix环境更加亲和 (如果你只安装了Windows, 我推荐你尽快安装Cygwin 或者coLinux ).

 

1.

从 http://httpd.apache.org 下载 apache_2.2.11-win32-x86-openssl-0.9.8i.msi , 安装至如 e:\Apache2.2, 安装的时候他让你填domain,hostname, 都选你的主机名即可 (可通过ipconfig/all或者hostname命令得到).

提示: Debian下更简单, $apt-get install apache2 命令直接完成.

 

2.

编辑conf\httpd.conf, 把下面的注释行生效:
#ServerName yourHostname:80
启动: bin\httpd.exe 或者 net start Apache2.2, 第一种启动方式有时便于你查错.

提示: Debian下用 $apache2 或者 $apache2ctl -k start

 

3.

下载mod_jk (mod_jk-1.2.28-httpd-2.2.3.so )

配置使用mod_jk, conf\httpd.conf 中增加:

---------------------------------------------------------------------------------
# jamesqiu
LoadModule jk_module modules/mod_jk-1.2.28-httpd-2.2.3.so
JkWorkersFile conf/workers.properties
JkLogFile logs/mod_jk.log
# trace, debug, info(*default), warn, error
JkLogLevel warn
# 让controller处理的url, controller和workers.properties中的名称需一致
JkMount /* controller  # */
# 不让controller处理的url
JkUnMount /test.html controller
---------------------------------------------------------------------------------

新建:
conf\workers.properties (内容如下, 或见附件1)

 

#--- see following for detail
# "http://tomcat.apache.org/connectors-doc/"
# "http://tomcat.apache.org/connectors-doc/reference/workers.html"

#========server列表========
worker.list=controller

#========controller,负载均衡控制器========
worker.controller.type=lb								# load-balance worker, can be "lb, status"
worker.controller.method=B								# 如何选择最优的worker, B[usyness]: 选最不忙的, R[equest]: 缺省
worker.controller.balance_workers=tomcat1,tomcat2		# 指定分担请求的tomcat
# *注意* sticky_session=1的时候不能设置sticky_session_force=1, 否则永远不能由另一worker接手
worker.controller.sticky_session=1						# 1: True, otherwise False, 相同session id一直访问同一服务器
worker.controller.sticky_session_force=0				# session id出错状态不返回500(Server Error), 由另一worker接手

#========tomcat1========
worker.tomcat1.port=8009		# ajp13 端口号，在tomcat下server.xml配置, 注意不是http端口8080
worker.tomcat1.host=localhost	# tomcat的主机地址，如不为本机，请填写ip地址
worker.tomcat1.type=ajp13		# apache和tomcat通讯方式, can be "ajp13, ajp14"
worker.tomcat1.lbfactor=1		# server的加权比重，值越高，分得的请求越多

#========tomcat2========
worker.tomcat2.port=8019		# ajp13 端口号，在tomcat下server.xml配置
worker.tomcat2.host=localhost	# tomcat的主机地址，如不为本机，请填写ip地址
worker.tomcat2.type=ajp13		# apache和tomcat通讯方式, can be "ajp13, ajp14"
worker.tomcat2.lbfactor=1		# server的加权比重，值越高，分得的请求越多

 

 

提示: Debian下没得说, $apt-get install libapache2-mod-jk 直接完成 安装

 

4.

从 http://tomcat.apache.org 下载 Tomcat 6.0.18 , 得益于Java程序的方便性, 解压至如 e:\tomcat 即用(需有安装好的jdk如sun jdk1.6.0_13). 因为要做多个tomcat进行load-balance, 至少得准备2份Tomcat.

如果此时你想都不想就从e:\tomcat复制出一份e:\tomcat2, 我要提醒你了同学: 作为一位IT人, 要尽量秉承DRY(别干傻事)和节约机器资源的原则, 不要老搞copy&paste的糗事让内行鄙视. , 你仅仅需要不同的conf\server.xml而已. bin\, lib\, webapps\完全可以共用, 这里我绕个弯(不用catalina run -config server2.xml), 以便郑重推荐Junction(下载地址 )这个类似于*nix下ln命令的工具, 他可以用一个<JUNCTION>链接来冒充实际目录欺骗Windows(其实现在这些OS挺傻的, 被虚拟机骗得找不着北, 都不知道自己运行在什么CPU和硬件上).

在各自的conf/server.xml中修改 http端口8080->808x, shutdown端口8005->80x5, ajp端口8009->80x9, 如:
  tomcat1 http:8080, shutdown:8005, ajp:8009
  tomcat2 http:8081, shutdown:8015, ajp:8019
  tomcat3 http:8082, shutdown:8025, ajp:8029

  .....

为了启动,停止,重启tomcat方便, 你可以在path里使用 tm.bat 和 tm2.bat, 但不要在其他地方设置 CATALINA_HOME (内容如下, 或见附件2)

 

@echo off
setlocal

if '%1'=='' (
        echo tm 1 启动tomcat
        echo tm 0 停止tomcat
        echo tm 2 重启tomcat
        goto end
)

set CATALINA_HOME=E:\tomcat
if %1==1 ( rem 启动
        %CATALINA_HOME%\bin\startup.bat
) else if %1==0 ( rem 停止
        %CATALINA_HOME%\bin\shutdown.bat
) else if %1==2 ( rem 重启
        %CATALINA_HOME%\bin\shutdown.bat
        sleep 1 && %CATALINA_HOME%\bin\startup.bat
)

:end
endlocal
@echo on

 

提示: Debian下你当然是用 ln -s 来轻松造出多份Tomcat了; 改用shell来写 tm.bat 也非常容易;

 

5.

重启Apache, 启动所有tomcat实例, 你可以手工用浏览器测试, 我安装了curl(在cygwin上), 也可以用如下脚本测试:

      for /L %B in (0,1,9) do curl http://localhost/test.jsp
可以看出tomcat1, tomcat2被轮流调用;

把其中一个tomcat实例停止, 再测试发现已经转到其他tomcat来处理了.

%CATALINA_HOME%\webapps\ROOT\test.jsp 的内容很简单, 仅仅标示一下自己是那个Tomcat实例:

<%
out.println("CATALINA_HOME=" + System.getenv("CATALINA_HOME") );
%> 

 

6.

后记:

• 要把一个Tomcat实例仅仅作为其他实例不工作时的临时应急, 而不在正常状态下参与 (例如: 较低配置的备份机器), 也很容易在workers.properties里面进行配置(参考 )
• 是否还需要在load-balance的基础上做Cluster( 进行session复制 )? 请自行认真评估应用需求. Cluster保证session不丢失的同时, 同步session行为也会出现更多的稳定性问题和性能问题(尤其在tomcat实例数量较多时), 而你放入session的对象, 也得认真实现java.io.Serializable. Cluster的配置Tomcat自带文档写得很清楚.