经RD方面要求,需要对memcached进行优化,做到主从同步,上网搜索了下发现repcached对memcached进行patch之后可以实现memcached的复制功能,经过安装测试发现还不错。

测试环境:

操作系统:Redhat 5.3 64bit

memcached:memcached-1.4.5 + repcached-2.3-1.4.5.patch

libevent:1.4.4

node1:10.23.36.143

node2:10.23.36.201

1、repcached介绍

repcached是日本人开发的实现memcached复制功能,它是一个单 master单 slave的方案,但它的 master/slave都是可读写的,而且可以相互同步,如果 master坏掉, slave侦测到连接断了,它会自动 listen而成为 master;而如果 slave坏掉, master也会侦测到连接断,它就会重新 listen等待新的 slave加入 。

2、安装libevent

wget http://cloud.github.com/downloads/libevent/libevent/libevent-1.4.14b-stable.tar.gz
tar xzvf libevent-1.4.14b-stable.tar.gz
cd libevent-1.4.14b-stable
./configure --prefix=/app/soft/libevent-1.4.4
make && make install

将libevent添加到操作系统的动态链接库里面:

#cat /etc/ld.so.conf
include ld.so.conf.d/*.conf
/app/soft/libevent-1.4.4/lib     #这行是新增的
#ldconfig    #使动态库生效

3、memcached的安装

wget http://mdounin.ru/files/repcached-2.3.1-1.4.5.patch.gz
gzip -d repcached-2.3.1-1.4.5.patch.gz
wget http://memcached.googlecode.com/files/memcached-1.4.15.tar.gz
tar xzvf memcached-1.4.15.tar.gz
patch -p0 -i repcached-2.3.1-1.4.5.patch    #对memcached源码进行patch
cd memcached-1.4.15
./configure --with-libevent=/app/soft/libevent-1.4.4/ --prefix=/app/soft/memcached-rep-1.4.5 --enable-replication --enable-64bit
make && make install

就这样带有复制功能的memcached已经安装完成了,接下来就是启动了。

5、memcached的同步相关参数介绍

相比没有没有patch过的memcached,带有复制功能的memcached只多了-x、-X两个参数,具体信息如下:

-x   hostname or IP address of peer repcached
-X       TCP port number for replication (default: 11212)
-x        #设置从哪个IP上进行数据同步,也就是设置Master的IP
-X        #设置数据同步的端口号,默认11212.如11212已经被使用的话,
          #需要通过这个参数来设置,否则memcached无法启动


6、memcached启动

#node1:10.23.36.143
/app/soft/memcached-rep-1.4.5/bin/memcached -d -m 1024 -p 11213 -u resin -c 1024 -P /tmp/memcached-rep.pid -x 10.23.36.201 -X 11215
#node2:10.23.36.201
/app/soft/memcached-rep-1.4.5/bin/memcached -d -m 1024 -p 11213 -u resin -c 1024 -P /tmp/memcached-rep.pid -x 10.23.36.143 -X 11215

本次启动的是两台memcached互为主从。

7、测试验证

①、可以分别在两台机器上通过telnet localhost 11213,然后通过stats、stats slabs、stats items命令查看memcache一些大概信息。

②、通过java程序来对memcached的读写进行验证,具体java代码如下:

package TestMemcached;
import com.danga.MemCached.MemCachedClient;
import com.danga.MemCached.SockIOPool;
public class TestMemcached {
    public static void main(String[] args) {
        /*初始化SockIOPool,管理memcached的连接池*/
        String[] servers = { "10.23.36.143:11213","10.23.36.201:11213" };
        SockIOPool pool = SockIOPool.getInstance();
        pool.setServers(servers);
        pool.setFailover(true);
        pool.setInitConn(10);
        pool.setMinConn(5);
        pool.setMaxConn(250);
        pool.setMaintSleep(30);
        pool.setNagle(false);
        pool.setSocketTO(3000);
        pool.setAliveCheck(true);
        pool.setFailback(false);
        pool.initialize();
        /*建立MemcachedClient实例*/
        MemCachedClient memCachedClient = new MemCachedClient();
        /*测试往memcached上写数据*/
        int idx = 1;
        while(true){
            System.out.println(idx);
            /*memCachedClient.add("key-"+idx, "value-"+idx);*/
            //测试往memcached上读数据
            System.out.println(memCachedClient.get("key-"+idx));
            try {
                Thread.sleep(10);
            } catch (InterruptedException e) {
                e.printStackTrace();
            }
                                                                           
            if(idx > 20){
                break;
            }
                                                               
                                                               
/*          System.out.println(memCachedClient.get("key-"+2));
            idx++;*/
        }
                                                           
    }
}

通过测试验证发现,分别想两台memcached写数据都会相互同步。

③、可以通过测试-vvv发现,每次memcached启动的时候都会向Master发送同步请求。


总结:

优点:

数据冗余

两台memcached都可以进行读写操作


缺点:

只支持单对单

不容易扩展