CentOS下Mycat+MySQL水平分割负载均衡配置记录

CentOS 6.5 下Mycat+MySQL水平分割负载均衡配置记录

什么是MYCAT?

Mycat数据库分库分表中间件,更多的就不说了,参考官网;

什么是中间件?

专业的定义我也不说了,说点相关类似的例子:

1、类似房屋中介:你自己要找到想出租出售房屋的人比较费劲,他们可以一下子提供给你很多;

2、大超市:你想一下子买到多种多样的生活用品可能需要跑很多地方,去大超市一个地方就可以了;

3、装修队:你想装修一下房子,可是你自己电工、木工、瓦工都不会,找一个装修队全搞定了;

4、Windows API:你想编程控制音量大小之类的,有那么多种品牌、型号的声卡,但你不必考虑那么多,只需要调用API就行了;

5、Mycat:你希望将相同类型的数据分库分表保存到不同的服务器上、不同的数据库(MySQL、MSSQL、Oracle、NoSQL)中的不同的表中,但操作起来就像操作一种类型的一个数据库那么简单,用它就OK了;

配置成功后

我们先来看看配置成功以后,能过Navicat for MySQL来连接Mycat是什么效果,有个直观的认识。

Mycat 默认端口是:8066


在Schema中配置了多少个Table,这里就能看到多少个。


工具的应用请参考:MySQL学习(二)图形界面管理工具Navicat for MySQL安装和使用

环境概述

CentOS 6.5

Mycat-server-1.5-release版本

MySQL 5.7.12

jdk1.8.0_92

前置条件

相关安装可参考以下链接:

CentOS 6.5 下MySQL 5.7.12主从复制架构配置记录

如何从官方网站下载jdk1.7?

CentOS下安装JDK7

这里用的是jdk1.8.0_92,安装步骤比较简单,不需要配置环境变量;

修改MySQL配置文件(可选)

vi /etc/my.cnf

添加一行配置:lower_case_table_names=1

# vi /etc/my.cnf

# For advice on how to change settings please see
# http://dev.mysql.com/doc/refman/5.7/en/server-configuration-defaults.html

[mysqld]

#[必须]启用二进制日志
log-bin=mysql-bin
#[必须]服务器唯一ID,默认是1,一般取IP最后一段
server-id=153

lower_case_table_names=1

# Remove leading # and set to the amount of RAM for the most important data
# cache in MySQL. Start at 70% of total RAM for dedicated server, else 10%.
# innodb_buffer_pool_size = 128M
#
# Remove leading # to turn on a very important data integrity option: logging
# changes to the binary log between backups.
# log_bin
#
# Remove leading # to set options mainly useful for reporting servers.
# The server defaults are faster for transactions and fast SELECTs.
# Adjust sizes as needed, experiment to find the optimal values.
# join_buffer_size = 128M
# sort_buffer_size = 2M
# read_rnd_buffer_size = 2M
datadir=/var/lib/mysql
socket=/var/lib/mysql/mysql.sock

# Disabling symbolic-links is recommended to prevent assorted security risks
symbolic-links=0

log-error=/var/log/mysqld.log
pid-file=/var/run/mysqld/mysqld.pid
如果找不到my.cnf文件,copy一个: cp /usr/share/mysql/my-default.cnf /etc/my.cnf
注意:Linux 下部署安装 MySQL,默认不忍略表名大小写,需要手动到/etc/my.cnf 下配置
lower_case_table_names=1 使 Linux 环境下 MySQL 忍略表名大小写,否则使用 MyCAT 的时候会提示找不到
表的错误!

解压复制文件

我这里将 mycat 放到“/usr/local/mycat/”目录下,你可以根据自己的需要选择合适的目录

tar -zxvf Mycat-server-1.5.1-RELEASE-20160509173344-linux.tar.gz
cp -r  mycat /usr/local/mycat
cd /usr/local/mycat/
chmod +x *
chmod +x 命令是给文件添加可执行权限

需要再装一台Mycat?直接用命令把文件复制过去:

scp -r /usr/local/mycat [email protected]:/usr/local/

配置环境变量

vi /etc/profile

在文件末尾添加一行:
export MYCAT_HOME=/usr/local/mycat
使修改生效:
source /etc/profile
测试是否生效:
echo $MYCAT_HOME

配置主机名映射

vi /etc/hosts

在文件中添加你的数据节点MySQL的IP映射:
192.168.0.151 sam_server_1
192.168.0.153 sam_server_2

配置schema

vi /usr/local/mycat/conf/schema.xml

参考我的配置吧,我从官网下载的Release版本的里面带的文件有好多错误,我修改了很长时间才能用。

<?xml version="1.0"?>
<!DOCTYPE mycat:schema SYSTEM "schema.dtd">
<mycat:schema xmlns:mycat="http://org.opencloudb/" >
	<!-- schema 中可以有多个table节点,列几个在Navicat中就能看到几个,库里有这里没有的话客户端中也看不到 -->
	<schema name="TESTDB" checkSQLschema="false" sqlMaxLimit="100">
		<table name="travelrecord" dataNode="dn1,dn2" rule="auto-sharding-long" />
		<table name="company" primaryKey="ID" dataNode="dn2,dn1" rule="mod-long"/>
		<table name="goods" primaryKey="ID" type="global" dataNode="dn1,dn2" />
		<table name="employee" primaryKey="ID" dataNode="dn1,dn2"
			rule="sharding-by-intfile" />
		<table name="customer" primaryKey="ID" dataNode="dn1,dn2"
			rule="sharding-by-intfile">
			<childTable name="orders" primaryKey="ID" joinKey="customer_id"
				parentKey="id">
				<childTable name="order_items" joinKey="order_id"
					parentKey="id" />
			</childTable>
			<childTable name="customer_addr" primaryKey="ID" joinKey="customer_id"
				parentKey="id" />
		</table>
	</schema>
	<!-- 数据节点 -->
	<dataNode name="dn1" dataHost="sam_server_1" database="db1" />
	<dataNode name="dn2" dataHost="sam_server_2" database="db2" />
	<!-- 节点主机信息 -->
	<dataHost name="sam_server_1" maxCon="1000" minCon="10" balance="0"
		writeType="0" dbType="mysql" dbDriver="native" switchType="1" slaveThreshold="100">
		<heartbeat>select user()</heartbeat>
		<!-- 指定写入数据的主机 -->
		<writeHost host="hostM1" url="192.168.0.151:3306" user="root" password="password">
			<!-- 指定读取数据的主机,可以有多个 -->
			<readHost host="hostS1" url="192.168.0.152:3306" user="root" password="password" />
		</writeHost>
	</dataHost>
	
	<dataHost name="sam_server_2" maxCon="1000" minCon="10" balance="0"
		writeType="0" dbType="mysql" dbDriver="native" switchType="1" slaveThreshold="100">
		<heartbeat>select user()</heartbeat>
		
		<writeHost host="hostM2" url="192.168.0.153:3306" user="root" password="password">
			<!-- can have multi read hosts -->
			<readHost host="hostS2" url="192.168.0.154:3306" user="root" password="password" />
		</writeHost>
	</dataHost>
</mycat:schema>
这里的用户密码是MySQL的远程登录用户名密码。

配置用户

vi /usr/local/mycat/conf/server.xml
<?xml version="1.0" encoding="UTF-8"?>
<!-- - - Licensed under the Apache License, Version 2.0 (the "License"); 
	- you may not use this file except in compliance with the License. - You 
	may obtain a copy of the License at - - http://www.apache.org/licenses/LICENSE-2.0 
	- - Unless required by applicable law or agreed to in writing, software - 
	distributed under the License is distributed on an "AS IS" BASIS, - WITHOUT 
	WARRANTIES OR CONDITIONS OF ANY KIND, either express or implied. - See the 
	License for the specific language governing permissions and - limitations 
	under the License. -->
<!DOCTYPE mycat:server SYSTEM "server.dtd">
<mycat:server xmlns:mycat="http://org.opencloudb/">
	<system>
	<property name="defaultSqlParser">druidparser</property>
      <!--  <property name="useCompression">1</property>--> <!--1为开启mysql压缩协议-->
	<!-- <property name="processorBufferChunk">40960</property> -->
	<!-- 
	<property name="processors">1</property> 
	<property name="processorExecutor">32</property> 
	 -->
		<!--默认是65535 64K 用于sql解析时最大文本长度 -->
		<!--<property name="maxStringLiteralLength">65535</property>-->
		<!--<property name="sequnceHandlerType">0</property>-->
		<!--<property name="backSocketNoDelay">1</property>-->
		<!--<property name="frontSocketNoDelay">1</property>-->
		<!--<property name="processorExecutor">16</property>-->
		<!-- 
			<property name="mutiNodeLimitType">1</property> 0:开启小数量级(默认) ;1:开启亿级数据排序
	    	<property name="mutiNodePatchSize">100</property> 亿级数量排序批量
			<property name="processors">32</property> <property name="processorExecutor">32</property> 
			<property name="serverPort">8066</property> <property name="managerPort">9066</property> 
			<property name="idleTimeout">300000</property> <property name="bindIp">0.0.0.0</property> 
			<property name="frontWriteQueueSize">4096</property> <property name="processors">32</property> -->
	</system>
	<user name="test">
		<property name="password">test</property>
		<property name="schemas">TESTDB</property>
	</user>

	<user name="mycat">
		<property name="password">123456</property>
		<property name="schemas">TESTDB</property>
		<property name="readOnly">false</property>
	</user>
	<!-- 
	<quarantine> 
	   <whitehost>
	      <host host="127.0.0.1" user="mycat"/>
	      <host host="127.0.0.2" user="mycat"/>
	   </whitehost>
       <blacklist check="false"></blacklist>
	</quarantine>
	-->

</mycat:server>
这里配置的是连接Mycat的用户,密码是明文的,schemas对应schema.xml文件中的schema节点。

创建数据库

在每个数据节点MySQL上创建分库,数据将会根据你指定的策略分配保存到不同的节点上。

这个要单独连接到每个MySQL上去创建,创建的数据库名称对应schema.xml文件中指定的名称,不做这一步的话客户端连接上操作的时候会不响应卡死。

启动服务

经过以上几个步骤的配置,就可以到/usr/local/Mycat/bin 目录下执行:
./mycat start
即可启动 mycat 服务!

注:mycat 支持的命令{ console | start | stop | restart | status | dump }

可以通过以下命令查看服务是否启动成功:

./mycat status

如果启动失败了,可以查看以下文件的内容,分析具体原因:

/usr/local/mycat/logs/wrapper.log

启动成功了,你应该已经知道怎么做了!马上用Navicat for MySQL连接上看看吧!

测试

总结时差点把这么大的事给忘了!

这里使用mycat自带的表来测试 启动mycat: mycat start 使用Navicat for MySQL连接mycat: mycat/[email protected]


建表:

create table employee (id int not null primary key,name varchar(100),sharding_id int not null);
插入数据:
insert into employee(id,name,sharding_id) values(1,'leader us',10000);
insert into employee(id,name,sharding_id) values(2, 'me',10010);
insert into employee(id,name,sharding_id) values(3, 'mycat',10000);
insert into employee(id,name,sharding_id) values(4, 'mydog',10010);
分别到数据DB1,DB2查看,可以看到在DB1中有: 1 leader us 10000 3 mycat 10000 DB2中有: 2 me 10010 4 mydog 10010
这说明分片成功了。

而我们还配置了主从复制,现在去从库看看,是不是也有主库中的数据了。

结束语

日志是最好的朋友,不明白出了什么问题,有日志的话就去查看它,没有比它更精确直接的了;

即使官网提供的帮助也是很杂乱,各种版本,我是根据几个版本来完成的。

对于用惯了Windows的图形配置界面的小伙伴,开始的时候会感觉比较吃力的。


参考:

Mycat官网

MyCat:开源分布式数据库中间件

mycat安装入门(两节点)



你可能感兴趣的:(mysql,数据库,centos,中间件,Mycat)