Windows 平台Nginx + tomcat +memcached 集群

 

一、软件

1. jdk1.7

2. nginx1.10

3. Tomcat7

4. Memcached1.4

二、主要安装步骤及配置

1. 在一台电脑上安装三台tomcat，主要涉及到端口号的问题。

Conf/Server.xml文件中：

<Server port="8005" shutdown="SHUTDOWN">

<Connector port="18082" protocol="HTTP/1.1"

               connectionTimeout="20000"

               redirectPort="8443" URIEncoding="UTF-8"/>

<Connector port="18029" protocol="AJP/1.3" redirectPort="8443" />

Bin/startup.bat,catalina.bat 文件中把CATALINA_HOME，CATALINA_BASE换成跟其他tomcat不一样，不然启动不了3个tomcat。比如tomcat1中叫CATALINA_HOME1，CATALINA_BASE1。

 

另外，在tomcat发布应用有两种方式，最直接的就是直接放在webapps目录下，但是这样会导致你每次修改之后要复制到三个tomcat下。因此，我这里用了虚拟目录的方式。在conf/Catalina/localhost(一般都是这个名字，除非自己修改过server.xml中host)中建立一个xml 文件。

<?xml version='1.0' encoding='utf-8'?>

<Context docBase="C:\webapps\yixun-app" path="/yixun-app" reloadable="true"/>

这里的path叫yixun-app,那么这个xml的文件就叫作yixun-app.xml。如果你的应用是””,那么代表是ROOT，那么你的文件名就是ROOT.xml。有几个项目就建几个这样的xml文件。

2. 配置nginx

http {

    include       mime.types;

    default_type  application/octet-stream;

 

    #log_format  main  '$remote_addr - $remote_user [$time_local] "$request" '

    #                  '$status $body_bytes_sent "$http_referer" '

    #                  '"$http_user_agent" "$http_x_forwarded_for"';

 

    #access_log  logs/access.log  main;

 

    sendfile        on;

    #tcp_nopush     on;

 

    #keepalive_timeout  0;

    keepalive_timeout  65;

 

    #gzip  on;

 

include proxy.conf;

upstream localhost {

      ip_hash;

  server localhost:18082 weight=1;

      server localhost:18081 weight=1;

      server localhost:18080 weight=1;

    }

    server {

        listen       80;

        server_name  cs.yixunapp.cn;

 

        #charset koi8-r;

 

        #access_log  logs/host.access.log  main;

 

        location / {

            root   html;

            index  index.html index.htm;

        }

 

        #error_page  404              /404.html;

 

        # redirect server error pages to the static page /50x.html

        #

        error_page   500 502 503 504  /50x.html;

        location = /50x.html {

            root   html;

        }

 

        # proxy the PHP scripts to Apache listening on 127.0.0.1:80

        #

        #location ~ \.php$ {

        #    proxy_pass   http://127.0.0.1;

        #}

 

        # pass the PHP scripts to FastCGI server listening on 127.0.0.1:9000

        #

        #location ~ \.php$ {

        #    root           html;

        #    fastcgi_pass   127.0.0.1:9000;

        #    fastcgi_index  index.php;

        #    fastcgi_param  SCRIPT_FILENAME  /scripts$fastcgi_script_name;

        #    include        fastcgi_params;

        #}

 

        # deny access to .htaccess files, if Apache's document root

        # concurs with nginx's one

        #

        #location ~ /\.ht {

        #    deny  all;

        #}

 

location ~ \.(jsp|do)$ {

   proxy_connect_timeout   3;

   proxy_send_timeout      30;

   proxy_read_timeout      30;

   proxy_pass http://localhost;

        }

location ~ \.(js|css|jpg|png|jpeg|gif)$ {

   root C:\webapps;

        }

    }

 

 

    # another virtual host using mix of IP-, name-, and port-based configuration

    #

    #server {

    #    listen       8000;

    #    listen       somename:8080;

    #    server_name  somename  alias  another.alias;

 

    #    location / {

    #        root   html;

    #        index  index.html index.htm;

    #    }

    #}

 

 

    # HTTPS server

    #

    server {

        listen       443 ssl;

        server_name  cs.yixunapp.cn;

 

        ssl_certificate      ../sslkey/1_cs.yixunapp.cn_bundle.crt;

        ssl_certificate_key  ../sslkey/2_cs.yixunapp.cn.key;

 

        ssl_session_cache    shared:SSL:1m;

        ssl_session_timeout  5m;

        ssl_ciphers  HIGH:!aNULL:!MD5;

        ssl_prefer_server_ciphers  on;

 

        location / {

            root   html;

            index  index.html index.htm;

        }

location ~ \.(jsp|do)$ {

   proxy_connect_timeout   3;

   proxy_send_timeout      30;

   proxy_read_timeout      30;

   proxy_pass http://localhost;

        }

location ~ \.(js|css|jpg|png|jpeg|gif)$ {

   root C:\webapps;

        }

    }

 

}

 

主要的就是配置upstream ,这个就是用来做分发的。

upstream localhost {

      ip_hash;

  server localhost:18082 weight=1;

      server localhost:18081 weight=1;

      server localhost:18080 weight=1;

    }

#weigth参数表示权值，权值越高被分配到的几率越大

#ip_hash表示同一个ip的请求会被分配到同一个tomcat(网上这里说有限制，具体可以百度一下，我这里的情况可以适用)

静态文件可以直接由nginx处理，因为我的项目里面图片之类的都是写的绝对路径，因此正好可以映射到我项目存放的位置。如果不是绝对路径的话也可以测试一下。另外如果tomcat采用的是每个tomcat下放一份应用的话，并且图片是采用绝对路径，也可以采用我这种写法，将root指向其中一个tomcat的webapps目录即可（未实验）。

 

3. Memcached安装

在memcached目录下运行memcached -d install。这个命令会将memcached安装到服务中。启动服务即可。也有说memcached -d start -vv>mem.log可以打印出日志，但是我试了下，日志没有记录，不晓得为啥，现在memcached的google code 打不开，还不晓得怎么解决。

4. 配置session-manager

Tomcat的conf/context.xml文件加如下配置

<Manager className="de.javakaffee.web.msm.MemcachedBackupSessionManager"  

            memcachedNodes="n1:localhost:11211"

requestUriIgnorePattern=".*\.(png|gif|jpg|css|js){1}"  

sticky="true"

sessionBackupAsync="false"  

sessionBackupTimeout="1800000"  

copyCollectionsForSerialization="false"

     transcoderFactoryClass="de.javakaffee.web.msm.JavaSerializationTranscoderFactory"  

        />

我这里使用了粘性session。使用粘性session还需要在tomcat的conf/server.xml中

<Engine name="Catalina" defaultHost="localhost" jvmRoute="tomcat1">加上jvmRoute属性。每个tomcat值不一样。

关于session-manager这两篇文章讲得还可以。

http://www.iteye.com/topic/1125301

http://blog.csdn.net/small_love/article/details/6662686

 

另外我碰到一个问题是不打开nginx ip_hash的情况下，使用粘性session，会出现重复登录的情况（登录的账号是放在session中）。

Session-manager 的jar包要跟tomcat版本一致。Maven上有相应的dependency。http://www.mvnrepository.com/artifact/de.javakaffee.msm