centos+nginx+tomcat负载均衡

操作系统：centos5.6

前端一台nginx服务器做调度. 后端两台tomcat做WEB服务器. 这里动态页与静态页都由tomcat来处理.

软件： 引用: 

nginx-0.7.28.tar.gz
pcre-7.8.tar.gz
apache-tomcat-6.0.20.tar.gz
jdk-6u14-linux-i586-rpm.bin

架构说明

三台服务器  一台调度也就是nginx服务器，它还是NFS服务器
我们把2个tomcat的webapps目录挂载到NFS服务器上,这样数据程序是同步的了。

配置步骤:
一、web服务器的配置
首先安装两台tomcat，两台安装都一样
1.安装JDK 引用: 

# pwd
/usr/local
# chmod a+x jdk-6u14-linux-i586-rpm.bin
# ./jdk-6u14-linux-i586-rpm.bin
# ln -s /usr/java/jdk1.6.0_14 /usr/local/java

设置环境变量
# vi profile
末尾增加如下内容 引用: 

JAVA_HOME=/usr/java/jdk1.6.0_14
CLASSPATH=/usr/java/jdk1.6.0_14/lib/dt.jar:/usr/java/jdk1.6.0_14/lib/tools.jar
PATH=/usr/java/jdk1.6.0_14/binPATH
export PATH JAVA_HOME CLASSPATH

2.安装tomcat
安装Tomcat。 引用: 

# cp apache-tomcat-6.0.20.tar.gz /usr/local/
# cd /usr/local/
# tar xzvf apache-tomcat-6.0.20.tar.gz
# ln -s apache-tomcat-6.0.20 tomcat
# vi /usr/local/tomcat/bin/catalina.sh
加入一行：
JAVA_HOME=/usr/java/jdk1.6.0_14
# /usr/local/tomcat/bin/startup.sh

启动服务后访问本地的8080端口可以看到对应apache tomcat页面了
把Tomcat加到自启动:
# vi /etc/rc.d/rc.local
在里面加入如下代码： 引用: 

export JDK_HOME=/usr/java/jdk1.6.0_14
export JAVA_HOME=/usr/java/jdk1.6.0_14
/usr/local/tomcat/bin/startup.sh

至此tomcat已安装成功了
优化: tomcat 比如防止内存溢出; TCP/IP  比如time_wait与closed_wait等等
--------------------------------------------------------------------------------------------------
二、 安装 nginx、nfs 注意它们是一台服务器上
1.安装 nginx
在安装之前首先要安装pcre-7.9.tar.gz 引用: 

# tar zxvf pcre-7.9.tar.gz
# cd pcre-7.9
# ./configure
# make && make install

安装nginx 引用: 

# tar zxvf nginx-0.7.61.tar.gz
# cd nginx-0.7.61
# ./configure --with-http_stub_status_module --prefix=/usr/local/nginx
# make && make install

修改nginx的配置文件
我这里是把原先的重命名然后新建了一个nginx.conf 引用: 

#vi nginx.conf
user nobody nobody;
worker_processes  8;
pid  /usr/local/nginx/logs/nginx.pid;
worker_rlimit_nofile 51200;
events
{
use epoll;
worker_connections 51200;
}
http{
include       mime.types;
default_type  application/octet-stream;
server_names_hash_bucket_size 128;
client_header_buffer_size 32k;
large_client_header_buffers 4 32k;
client_max_body_size 8m;
     
sendfile on;
tcp_nopush     on;
keepalive_timeout 60;
tcp_nodelay on;
fastcgi_connect_timeout 300;
fastcgi_send_timeout 300;
fastcgi_read_timeout 300;
fastcgi_buffer_size 64k;
fastcgi_buffers 4 64k;
fastcgi_busy_buffers_size 128k;
fastcgi_temp_file_write_size 128k;
gzip on;
gzip_min_length  1k;
gzip_buffers     4 16k;
gzip_http_version 1.0;
gzip_comp_level 2;
gzip_types       text/plain application/x-javascript text/css application/xml;
gzip_vary on;
#设定负载均衡列表  
upstream  backend
{  
server 192.168.100.89:8080;
server 192.168.100.90:8080;
}
#设定虚拟主机
server {
listen 80;
server_name  www.syitren.com;
#对 / 所有做负载均衡 （本机nginx采用完全转发，所有请求都转发到后端的tomcat集群）
location / {  
root /var/www ;
index index.jsp index.htm index.html;
proxy_redirect off;
#保留用户真实信息
proxy_set_header Host $host;
proxy_set_header  X-Real-IP  $remote_addr;
proxy_set_header  X-Forwarded-For $proxy_add_x_forwarded_for;
proxy_pass  http://backend;
}

#location /nginx {  
#access_log  on;
#auth_basic  "NginxStatus";
#auth_basic_user_file  /usr/local/nginx/htpasswd;
#}
log_format  access  "$remote_addr - $remote_user [$time_local] "$request" "
"$status $body_bytes_sent "$http_referer" "
""$http_user_agent" $http_x_forwarded_for";
access_log  /var/log/access.log  access;
}
}

检查nginx的配置文件 引用: 

# /usr/local/webserver/nginx/sbin/nginx -t

启动nginx 引用: 

# /usr/local/webserver/nginx/sbin/nginx

重启nginx 引用: 

# kill -HUP `cat /usr/local/nginx/logs/nginx.pid`

补：
(1)查看负载均衡信息 引用: 

location /nginx {  
stub_status on;
access_log  on;
auth_basic  "NginxStatus";
auth_basic_user_file  /usr/local/nginx/htpasswd;
}

其中/usr/local/nginx/htpasswd可以用apache自带的功能生成。

最后在IE里访问:
http://www.syitren.com/nginx,然后输入用户名密码就进入了。
进入之后的说明
输入地址 http://www.syitren.com/nginx/，输入验证帐号密码，即可看到类似如下内容： 引用: 

Active connections: 328
server accepts handled requests
9309 8982  28890
Reading: 1 Writing: 3 Waiting: 324

第一行表示目前活跃的连接数
第三行的第三个数字表示Nginx运行到当前时间接受到的总请求数，如果快达到了上限，就需要加大上限值了。
第四行是Nginx的队列状态
(2)负载均衡方法参考《nginx的upstream目前支持的几种分配方式》一文
http://bbs.yahunet.com/thread-10028-1-1.html引用: 

upstream  backend
{  
server 192.168.100.89:8080;
server 192.168.100.90:8080;
}

--------------------------------------------------------------------------------------------------

三、 配置NFS 了
需要安装rpm包portmap、nfs 引用: 

# vi /etc/export
/var/www  192.168.100.89(rw,sync,no_root_squash),192.168.100.90(rw,sync,no_root_squash)
# service portmap restart
# service nfs start
# exportfs -rv

重新输出共享目录 引用: 

# showmoun -e

查看本机共享的目录

然后tomcat的两台服务器挂载 引用: 

# mount 192.168.100.88:/var/www  /usr/local/tomcat/weapps

然后我们要在两台tomcat的配置文件中即server.xml中做虚拟主机要与nginx.conf里的一致才OK 引用: 

# vi server.xml
<Host name="www.syitren.com" debug="0" appBase="webapps" unpackWARs="true" autoDeploy="true" xmlValidation="false"  xmlNamespaceAware="false">
  <Context path="" docBase="/usr/local/tomcat/webapps/" debug="0" reloadable="true" crossContext="true"/>  
  <Logger className="org.apache.catalina.logger.FileLogger" directory="logs" prefix="www.syitren.com_log." suffix=".txt"
timestamp="true"/>
</Host>

--------------------------------------------------------------------------------------------------



写了一个测试session的页，上传到虚拟主机对应的目录。

（1）访问一次刷新一次再刷新发现时间每次都不一样，就是来回出现两台tomcat的系统时间，说明成功了。
（2）然后把其中的一台tomcat停掉，这时我们再刷新其中有一个就没有响应了，但过了一分钟左右就是一台机器提供服务了，说明，nginx可以自动把down的服务器去除，从而使客户端透明。
（3）然后再把停掉的tomcat服务器开启，过一段时间后，nginx服务器又把它加入调度行列。这都是自动的。