基于MyCat实现读写分离
读写分离,简单地说是把对数据库的读和写操作分开,以对应不同的数据库服务器。主数据库提供写操作,从数据库提供读操作,这样能有效地减轻单台数据库的压力。主数据库进行写操作后,数据及时同步到所读的数据库,尽可能保证读、写数据库的数据一致,比如MySQL的主从复制、Oracle的data guard、SQL Server的复制订阅等。
1,角色分清:
读的数据库权限: 只可以做select
写的数据库操作 : select/uodate/insert/create/delete
既然要实现分离,通过mycat路由不同的数据库进行访问:
mycat原理: 会拦截用户端的所有jdbc进行根据sql语句判断转发到不同的数据库执行
mycat java语言开发 类似与nginx
mycat 可以实现数据库反向代理 隐藏真实的数据库ip地址。
基于MyCat实现读写分离
读写分离,简单地说是把对数据库的读和写操作分开,以对应不同的数据库服务器。主数据库提供写操作,从数据库提供读操作,这样能有效地减轻单台数据库的压力。主数据库进行写操作后,数据及时同步到所读的数据库,尽可能保证读、写数据库的数据一致,比如MySQL的主从复制、Oracle的data guard、SQL Server的复制订阅等。
Linux环境安装MyCat实现读写分离
1、上传安装Mycat-server-1.6.5-release-20180122220033-linux.tar
2、解压安装包tar –zxvf
3、配置schema.xml 和server.xml
4、客户端连接端口号: 8066
配置文件介绍:
Linux环境安装MyCat实现读写分离
1、进入bin目录
启动MyCat ./mycat start
停止MyCat ./mycat stop
2、查看/usr/local/mycat/logs wrapper.log日志 如果是为successfully 则启动成功
关闭防火墙:systemctl stop firewalld.service
只可读的账号 user user 端口号8066
可读可写的账号 root root端口号8066
shema.xml配置
select user()
server.xml配置
123456
mycat_testdb
user
mycat_testdb
true
Linux环境安装MyCat实现读写分离
1、进入bin目录
启动MyCat ./mycat start
停止MyCat ./mycat stop
2、查看/usr/local/mycat/logs wrapper.log日志 如果是为successfully 则启动成功
关闭防火墙:systemctl stop firewalld.service
只可读的账号 user user 端口号8066
可读可写的账号 root 123456 端口号8066
SpringBoot项目整合动态数据源(读写分离)
1.配置多个数据源,根据业务需求访问不同的数据,指定对应的策略:增加,删除,修改操作访问对应数据,查询访问对应数据,不同数据库做好的数据一致性的处理。由于此方法相对易懂,简单,不做过多介绍。
- 动态切换数据源,根据配置的文件,业务动态切换访问的数据库:此方案通过Spring的AOP,AspactJ来实现动态织入,通过编程继承实现Spring中的AbstractRoutingDataSource,来实现数据库访问的动态切换,不仅可以方便扩展,不影响现有程序,而且对于此功能的增删也比较容易。
- 通过mycat来实现读写分离:使用mycat提供的读写分离功能,mycat连接多个数据库,数据源只需要连接mycat,对于开发人员而言他还是连接了一个数据库(实际是mysql的mycat中间件),而且也不需要根据不同 业务来选择不同的库,这样就不会有多余的代码产生。
详细参考配置
动态数据源核心配置
在Spring 2.0.1中引入了AbstractRoutingDataSource, 该类充当了DataSource的路由中介, 能有在运行时, 根据某种key值来动态切换到真正的DataSource上。
1.项目中需要集成多个数据源分别为读和写的数据源,绑定不同的key。
2.采用AOP技术进行拦截业务逻辑层方法,判断方法的前缀是否需要写或者读的操作
3.如果方法的前缀是写的操作的时候,直接切换为写的数据源,反之切换为读的数据源
也可以自己定义注解进行封装
动态数据源项目整合
Maven依赖信息
4.0.0
org.springframework.boot
spring-boot-starter-parent
2.3.3.RELEASE
com.taotao
dxfl
0.0.1-SNAPSHOT
dxfl
Demo project for Spring Boot
1.8
org.springframework.boot
spring-boot-starter-aop
org.springframework.boot
spring-boot-starter-web
mysql
mysql-connector-java
5.1.37
runtime
com.alibaba
druid
1.0.23
org.springframework.boot
spring-boot-starter-thymeleaf
org.projectlombok
lombok
com.baomidou
mybatis-plus-boot-starter
3.3.2
org.springframework.boot
spring-boot-starter-test
test
org.junit.vintage
junit-vintage-engine
com.baomidou
mybatis-plus-support
2.2.0
org.springframework.boot
spring-boot-maven-plugin
application.yml
spring:
datasource:
###可读数据源
select:
jdbc-url: jdbc:mysql://192.168.0.99:8066/test?useUnicode=true&characterEncoding=UTF-8&serverTimezone=UTC&useSSL=true
driver-class-name: com.mysql.jdbc.Driver
username: user
password: user
####可写数据源
update:
jdbc-url: jdbc:mysql://192.168.0.99:8066/test?useUnicode=true&characterEncoding=UTF-8&serverTimezone=UTC&useSSL=true
driver-class-name: com.mysql.jdbc.Driver
username: root
password: 123456
logging:
level:
com.taotao.dxfl: debug
DataSourceContextHolder
package com.taotao.dxfl.config;
import org.springframework.context.annotation.Lazy;
import org.springframework.stereotype.Component;
/**
*@author tom
*Date 2020/8/22 0022 10:09
*
*/
@Component
@Lazy(false)
public class DataSourceContextHolder {
// 采用ThreadLocal 保存本地多数据源
private static final ThreadLocal contextHolder = new ThreadLocal<>();
// 设置数据源类型
public static void setDbType(String dbType) {
contextHolder.set(dbType);
}
public static String getDbType() {
return contextHolder.get();
}
public static void clearDbType() {
contextHolder.remove();
}
}
DataSourceConfig
package com.taotao.dxfl.config;
import org.springframework.boot.context.properties.ConfigurationProperties;
import org.springframework.boot.jdbc.DataSourceBuilder;
import org.springframework.context.annotation.Bean;
import org.springframework.context.annotation.Configuration;
import javax.sql.DataSource;
/**
*@author tom
*Date 2020/8/22 0022 10:10
*
*/
@Configuration
public class DataSourceConfig {
// 创建可读数据源
@Bean(name = "selectDataSource")
@ConfigurationProperties(prefix = "spring.datasource.select") // application.properteis中对应属性的前缀
public DataSource dataSource1() {
return DataSourceBuilder.create().build();
}
// 创建可写数据源
@Bean(name = "updateDataSource")
@ConfigurationProperties(prefix = "spring.datasource.update") // application.properteis中对应属性的前缀
public DataSource dataSource2() {
return DataSourceBuilder.create().build();
}
}
DynamicDataSource
package com.taotao.dxfl.config;
import org.springframework.beans.factory.annotation.Autowired;
import org.springframework.beans.factory.annotation.Qualifier;
import org.springframework.context.annotation.Primary;
import org.springframework.jdbc.datasource.lookup.AbstractRoutingDataSource;
import org.springframework.stereotype.Component;
import javax.sql.DataSource;
import java.util.HashMap;
import java.util.Map;
/**
*@author tom
*Date 2020/8/22 0022 10:12
*
*/
//在Spring 2.0.1中引入了AbstractRoutingDataSource, 该类充当了DataSource的路由中介, 能有在运行时, 根据某种key值来动态切换到真正的DataSource上。
@Component
@Primary
public class DynamicDataSource extends AbstractRoutingDataSource {
@Autowired
@Qualifier("selectDataSource")
private DataSource selectDataSource;
@Autowired
@Qualifier("updateDataSource")
private DataSource updateDataSource;
/**
* 这个是主要的方法,返回的是生效的数据源名称
*/
@Override
protected Object determineCurrentLookupKey() {
System.out.println("DataSourceContextHolder:::" + DataSourceContextHolder.getDbType());
return DataSourceContextHolder.getDbType();
}
/**
* 配置数据源信息
*/
@Override
public void afterPropertiesSet() {
Map
SwitchDataSourceAOP
package com.taotao.dxfl.config;
import org.aspectj.lang.JoinPoint;
import org.aspectj.lang.annotation.Aspect;
import org.aspectj.lang.annotation.Before;
import org.springframework.context.annotation.Lazy;
import org.springframework.core.annotation.Order;
import org.springframework.stereotype.Component;
/**
*@author tom
*Date 2020/8/22 0022 10:19
*
*/
@Aspect
@Component
@Lazy(false)
@Order(0) // Order设定AOP执行顺序 使之在数据库事务上先执行
public class SwitchDataSourceAOP {
// 这里切到你的方法目录
@Before("execution(* com.taotao.dxfl.controller.*.*(..))")
public void process(JoinPoint joinPoint) {
String methodName = joinPoint.getSignature().getName();
if (methodName.startsWith("get") || methodName.startsWith("count") || methodName.startsWith("find")
|| methodName.startsWith("list") || methodName.startsWith("select") || methodName.startsWith("check")) {
DataSourceContextHolder.setDbType("selectDataSource");
} else {
// 切换dataSource
DataSourceContextHolder.setDbType("updateDataSource");
}
}
}
entity:
package com.taotao.dxfl.entity;
/**
*@author tom
*Date 2020/8/22 0022 10:26
*
*/
import com.baomidou.mybatisplus.annotations.TableId;
import com.baomidou.mybatisplus.annotations.TableLogic;
import com.baomidou.mybatisplus.annotations.TableName;
import com.baomidou.mybatisplus.annotations.Version;
import com.baomidou.mybatisplus.enums.IdType;
import lombok.Data;
import lombok.EqualsAndHashCode;
import java.io.Serializable;
import java.time.LocalDateTime;
/**
*
*
*
*
* @author jobob
* @since 2020-06-09
*/
@TableName("meite_user")
@Data
@EqualsAndHashCode(callSuper = false)
public class MeiteUser implements Serializable {
private static final long serialVersionUID = 1L;
private Integer userId;
private String userName;
private Integer userAge;
private String userAddres;
private LocalDateTime createTime;
/**
* 逻辑删除
* 0存在 1 隐藏
*/
@TableLogic
private Integer deleted = 0;
// 版本
/* @Version
private Integer version;*/
}
controller
package com.taotao.dxfl.controller;
import com.taotao.dxfl.entity.MeiteUser;
import com.taotao.dxfl.mapper.MeiteUserMapper;
import org.springframework.beans.factory.annotation.Autowired;
import org.springframework.web.bind.annotation.GetMapping;
import org.springframework.web.bind.annotation.RequestMapping;
import org.springframework.web.bind.annotation.RestController;
import java.util.List;
/**
*@author tom
*Date 2020/8/22 0022 10:28
*
*/
@RestController
public class MtController {
@Autowired
private MeiteUserMapper meiteUserMapper;
@RequestMapping("/find")
public MeiteUser find(Integer userId){
MeiteUser meiteUser = meiteUserMapper.select(userId);
return meiteUser;
}
@GetMapping("/insertUser")
public String insertUser(MeiteUser user) {
meiteUserMapper.add(user);
return "2";
}
}
mapper:
package com.taotao.dxfl.mapper;
import com.taotao.dxfl.entity.MeiteUser;
import com.baomidou.mybatisplus.core.mapper.BaseMapper;
import org.apache.ibatis.annotations.Insert;
import org.apache.ibatis.annotations.Select;
/**
*@author tom
*Date 2020/8/22 0022 10:27
*
*/
public interface MeiteUserMapper extends BaseMapper {
@Select("select * from meite_user where user_id=27")
MeiteUser select(Integer userId);
@Insert("INSERT INTO `test`.`meite_user`( `user_name`, `user_age`, `user_addres`, `create_time`, `deleted`, `version`) VALUES ( '1', 19, '上海市', '2020-04-22 15:45:52', 1, 0);\n")
void add(MeiteUser user);
}
结果:
https://www.cnblogs.com/joylee/p/7513038.html