经RD方面要求,需要对memcached进行优化,做到主从同步,上网搜索了下发现repcached对memcached进行patch之后可以实现memcached的复制功能,经过安装测试发现还不错。
测试环境:
操作系统:Redhat 5.3 64bit
memcached:memcached-1.4.5 + repcached-2.3-1.4.5.patch
libevent:1.4.4
node1:10.23.36.143
node2:10.23.36.201
1、repcached介绍
repcached是日本人开发的实现memcached复制功能,它是一个单 master单 slave的方案,但它的 master/slave都是可读写的,而且可以相互同步,如果 master坏掉, slave侦测到连接断了,它会自动 listen而成为 master;而如果 slave坏掉, master也会侦测到连接断,它就会重新 listen等待新的 slave加入 。
2、安装libevent
wget http://cloud.github.com/downloads/libevent/libevent/libevent-1.4.14b-stable.tar.gz tar xzvf libevent-1.4.14b-stable.tar.gz cd libevent-1.4.14b-stable ./configure --prefix=/app/soft/libevent-1.4.4 make && make install
将libevent添加到操作系统的动态链接库里面:
#cat /etc/ld.so.conf include ld.so.conf.d/*.conf /app/soft/libevent-1.4.4/lib #这行是新增的 #ldconfig #使动态库生效
3、memcached的安装
wget http://mdounin.ru/files/repcached-2.3.1-1.4.5.patch.gz gzip -d repcached-2.3.1-1.4.5.patch.gz wget http://memcached.googlecode.com/files/memcached-1.4.15.tar.gz tar xzvf memcached-1.4.15.tar.gz patch -p0 -i repcached-2.3.1-1.4.5.patch #对memcached源码进行patch cd memcached-1.4.15 ./configure --with-libevent=/app/soft/libevent-1.4.4/ --prefix=/app/soft/memcached-rep-1.4.5 --enable-replication --enable-64bit make && make install
就这样带有复制功能的memcached已经安装完成了,接下来就是启动了。
5、memcached的同步相关参数介绍
相比没有没有patch过的memcached,带有复制功能的memcached只多了-x、-X两个参数,具体信息如下:
-x <ip_addr> hostname or IP address of peer repcached -X <num> TCP port number for replication (default: 11212) -x #设置从哪个IP上进行数据同步,也就是设置Master的IP -X #设置数据同步的端口号,默认11212.如11212已经被使用的话, #需要通过这个参数来设置,否则memcached无法启动
6、memcached启动
#node1:10.23.36.143 /app/soft/memcached-rep-1.4.5/bin/memcached -d -m 1024 -p 11213 -u resin -c 1024 -P /tmp/memcached-rep.pid -x 10.23.36.201 -X 11215 #node2:10.23.36.201 /app/soft/memcached-rep-1.4.5/bin/memcached -d -m 1024 -p 11213 -u resin -c 1024 -P /tmp/memcached-rep.pid -x 10.23.36.143 -X 11215
本次启动的是两台memcached互为主从。
7、测试验证
①、可以分别在两台机器上通过telnet localhost 11213,然后通过stats、stats slabs、stats items命令查看memcache一些大概信息。
②、通过java程序来对memcached的读写进行验证,具体java代码如下:
package TestMemcached; import com.danga.MemCached.MemCachedClient; import com.danga.MemCached.SockIOPool; public class TestMemcached { public static void main(String[] args) { /*初始化SockIOPool,管理memcached的连接池*/ String[] servers = { "10.23.36.143:11213","10.23.36.201:11213" }; SockIOPool pool = SockIOPool.getInstance(); pool.setServers(servers); pool.setFailover(true); pool.setInitConn(10); pool.setMinConn(5); pool.setMaxConn(250); pool.setMaintSleep(30); pool.setNagle(false); pool.setSocketTO(3000); pool.setAliveCheck(true); pool.setFailback(false); pool.initialize(); /*建立MemcachedClient实例*/ MemCachedClient memCachedClient = new MemCachedClient(); /*测试往memcached上写数据*/ int idx = 1; while(true){ System.out.println(idx); /*memCachedClient.add("key-"+idx, "value-"+idx);*/ //测试往memcached上读数据 System.out.println(memCachedClient.get("key-"+idx)); try { Thread.sleep(10); } catch (InterruptedException e) { e.printStackTrace(); } if(idx > 20){ break; } /* System.out.println(memCachedClient.get("key-"+2)); idx++;*/ } } }
通过测试验证发现,分别想两台memcached写数据都会相互同步。
③、可以通过测试-vvv发现,每次memcached启动的时候都会向Master发送同步请求。
总结:
优点:
数据冗余
两台memcached都可以进行读写操作
缺点:
只支持单对单
不容易扩展