以下主要介绍Amoeba for mysql:
Amoeba for MySQL致力于MySQL的分布式数据库前端代理层,它主要在应用层访问MySQL的时候充当query 路由功能,与注 分布式数据库 proxy 开发。座落不Client、DBServer(s)之间。对客户端透明。具有负载均衡、高可用性、Query过滤、读写分离、可路由相关的query到目标数据库、可并发请求多台数据库 合并结果。 在Amoeba上面你能够完成多数据源的高可用、负载均衡、数据切片的功能。目前在很多企业的生产线上面使用。
那么Amoeba for mysql 对客户端程序来说是什么呢?我们就当它是mysql吧,它是一个虚拟的mysql,对外提供mysql协议。客户端连接amoeba就象连接mysql一样。在amoeba内部需要配置相关的认证属性。
Amoeba for mysql与Mysql Proxy 的比较:
在MySQL proxy 6.0版本上面如果想要读写分离并�D 读集群、写集群 机器比较多情况下,用mysql proxy 需要相当大的工作量,目前mysql proxy没有现成的 lua脚本。mysql proxy根本没有配置文件, lua脚本就是它的全部,当然lua是相当方便的。那么同样这种东西需要编写大量的脚本才能完成一 个复杂的配置。而Amoebafor Mysql只需要进行相关的配置就可以满足需求。
Amoeba for MySQL的优点:
1. 降低数据切分带来的复杂多数据库结构
2. 提供切分规则并降低数据切分规则给应用带来的影响
3. 降低db 不客户端的连接数
4. 读写分离
Amoeba for MySQL的缺点:
1. Amoeba for MySQL不支持事务:其实,分布式事务的问题是所有数据库中间层普遍面临的问题,不是Amoeba独有的问题;目前通常的解决办法是,将事务拆分成几个单数据库内的小事务,由应用程序进行总控。
2. Amoeba for MySQL不支持跨节点JOIN:同样,这个问题也不是Amoeba独有的,通常的解决办法是由应用程序先从一个节点取出数据,然后由应用程序去其他节点JOIN。
3. Amoeba for MySQL不支持跨节点排序:这个问题也不是Ameoba独有的,通常的解决办法是由应用程序从多个节点中取出数据,然后进行排序。
4. Amoeba for MySQL不适合返回大量(超过10万)数据的查询。
5. Amoeba for MySQL不支持分库分表,只能做到分数据库实例。
为何使用Amoeba :
随着传统的数据库技术日趋成熟、计算机网络技术的飞速发展和应用范围的扩充,数据库应用已经普遍建立于计算机网络之上。这时集中式数据库系统表现出它的不足:集中式处理,势必造成性能瓶颈;应用程序集中在一台计算机上运行,一旦该计算机发生故障,则整个系统受到影响,可靠性不高;集中式处理引起系统的规模 和配置都不够灵活,系统的可扩充性差。在这种形势下,集中式数据库将向分布式数据库发展。而Amoeba的透明、简易配置及多个优点使其成为分布式数据库 代理产品中的优秀选择。
1.下载jdk和amoeba
amoeba-mysql-binary-2.2.0.tar.gz
jdk-7u71-linux-x64.tar.gz
2.解压jdk并添加环境变量
mkdir /Amoeba
mv jdk-7u71-linux-x64.tar.gz /Amoeba/
cd /Amoeba/
tar xf jdk-7u71-linux-x64.tar.gz
vi /etc/profile ///添加环境变量
JAVA_HOME=/Amoeba/jdk1.7.0_71
export JAVA_HOME
PATH=$JAVA_HOME/bin:$PATH
export PATH
CLASSPATH=.:$JAVA_HOME/lib/tools.jar:$JAVA_HOME/lib/dt.jar:$CLASSPATH
export CLASSPATH
source /etc/profile
java -version
cd /usr/local/
mkdir amoeba
tar xf amoeba-mysql-binary-2.2.0.tar.gz -Camoeba
cd amoeba
chmod -R +x bin
cd conf/
Amoeba for MySQL的使用是很简单的,主要是通过xml文件来实现的。
1. 配置文件介绍:
(1.) dbServers.xml 想象Amoeba作为数据库代理层,它一定会和很多数据库保持通信,因此它必须知道由它代理的数据库如何连接,比如最基础的:主机IP、端口、 Amoeba使用的用户名和密码等等。这些信息存储在$AMOEBA_HOME/conf/dbServers.xml中。
(2.) rule.xml Amoeba为了完成数据切分提供了完善的切分规则配置,为了了解如何分片数据、如何将数据库返回的数据整合,它必须知道切分规则。不切分规则相关的信息存储在$AMOEBA_HOME/conf/rule.xml中。
(3.) functionMap.xml 当我们书写SQL来操作数据库的时候,常常会用到很多不同的数据库函数,比如:UNIX_TIMESTAMP()、SYSDATE()等等。这些函数如 何被Amoeba解析呢?$AMOEBA_HOME/conf/functionMap.xml描述了函数名和函数处理的关系。
(4.) ruleFunctionMap.xml 对$AMOEBA_HOME/conf/rule.xml进行配置时,会用到一些我们自己定义的函数,比如我们需要对用户ID求HASH值来切分数据, 这些函数在$AMOEBA_HOME/conf/ruleFunctionMap.xml中定义。
(5.) access_list.conf Amoeba可以制定一些可访问以及拒绝访问的主机IP地址,这部分配置在$AMOEBA_HOME/conf/access_list.conf中。
(6.) log4j.xml Amoeba允许用户配置输出日志级别以及方式,配置方法使用log4j的文件格式,文件是$AMOEBA_HOME/conf/log4j.xml。其中,我们主要用到dbServer.xml 和 amoeba.xml 。
主要配置dbServers.xml, amoeba.xml
amoeba.xml 的认证模块
<propertyname="authenticator">
<beanclass="com.meidusa.amoeba.mysql.server.MysqlClientAuthenticator">
<propertyname="user">root</property> ///客户端登录到amoeba上的用户
<propertyname="password">123456</property> ///密码
<property name="filter">
<beanclass="com.meidusa.amoeba.server.IPAccessController">
<propertyname="ipFile">${amoeba.home}/conf/access_list.conf</property>
</bean>
</property>
</bean>
</property>
读写分离模块
<!-- read write -->
<propertyname="writePool">server1</property>
<propertyname="readPool">multiPool</property>
<propertyname="needParse">true</property>
切记 <!-- -->中间默认注释
dbServers.xml认证模块
<!--mysql port --> ///登录到后端数据库的端口
<propertyname="port">3306</property>
<!--mysql schema -->
<propertyname="schema">paixian</property> ///库
<!--mysql user -->
<propertyname="user">root</property> ///用户
<!-- mysql password -->
<propertyname="password">123456</property> ///密码(!!!!默认被注释)
dbServers.xml中后端数据库ip
<dbServer name="server1" parent="abstractServer">
<factoryConfig>
<!-- mysql ip -->
<propertyname="ipAddress">192.168.1.134</property>
</factoryConfig>
</dbServer>
dbServers.xml中数据库池
<dbServername="multiPool" virtual="true">
<poolConfigclass="com.meidusa.amoeba.server.MultipleServerPool">
<!-- Load balancingstrategy: 1=ROUNDROBIN , 2=WEIGHTBASED , 3=HA-->
<propertyname="loadbalance">1</property> ///算法
<!-- Separated bycommas,such as: server1,server2,server1 -->
<propertyname="poolNames">server1,server2</property>///池中的数据库
</poolConfig>
</dbServer>
后端服务器授权给amoeba,amoeba授权给后端客户端
其中遇到的问题
The stack size specified is too small,Specify at least 228k
Error: Could not create the Java VirtualMachine.
Error: A fatal exception has occurred.Program will exit.
解决办法:
# vim /usr/local/amoeba/bin/amoeba
#DEFAULT_OPTS="-server-Xms256m -Xmx256m -Xss128k"注释
DEFAULT_OPTS="-server-Xms256m -Xmx256m -Xss256k"增加
java.util.NoSuchElementException: Could notcreate a validated object, cause: ValidateObject failed(ameoba)
015-09-24 15:48:05,561 ERRORnet.MysqlServerConnection - handShake with /192.168.1.135:3306 error:Accessdenied for user 'amoeba'@'192.168.1.136' (using password:NO),hashCode=1541320695
!!!!!!!一个-->注释的问题,把密码注释了