浅谈高性能数据库集群 —— 读写分离

点击上方“芋道源码”,选择“置顶公众号”

技术文章第一时间送达!

源码精品专栏

 
  • 精尽 Dubbo 原理与源码 69 篇

  • 精尽 Netty 原理与源码 61 篇

  • 中文详细注释的开源项目

  • Java 并发源码合集

  • RocketMQ 源码合集

  • Sharding-JDBC 源码解析合集

  • Spring MVC 和 Security 源码合集

  • MyCAT 源码解析合集

来源:http://t.cn/EZK3vPU

  • 1. 读写分离概述

  • 2. 适用场景

  • 3. 引入的系统复杂度问题


最近学习了阿里资深技术专家李运华的架构设计关于读写分离的教程,颇有收获,总结一下。

本文主要介绍高性能数据库集群读写分离相关理论,基本架构,涉及的复杂度问题以及常见解决方案。

1. 读写分离概述

浅谈高性能数据库集群 —— 读写分离_第1张图片 读写分离概述

基本架构图:

浅谈高性能数据库集群 —— 读写分离_第2张图片 基本架构图.jpg

2. 适用场景

浅谈高性能数据库集群 —— 读写分离_第3张图片 适用场景.png

读写分离不是银弹,并不是一有性能问题就上读写分离,而是应该先优化,例如优化慢查询,调整不合理的业务逻辑,引入缓存查询等只有确定系统没有优化空间后才考虑读写分离集群

3. 引入的系统复杂度问题

问题一 主从复制延迟

浅谈高性能数据库集群 —— 读写分离_第4张图片 主从复制延迟.png

问题二 分配机制

如何将读写操作区分开来,然后访问不同的数据库服务器?

解决方案1 客户端程序代码封装实现

基本架构图

浅谈高性能数据库集群 —— 读写分离_第5张图片 程序代码封装实现分配基本架构图 浅谈高性能数据库集群 —— 读写分离_第6张图片 程序代码封装

业界开源实现

  • Sharding-JDBC 定位为轻量级Java框架,在Java的JDBC层提供的额外服务。 它使用客户端直连数据库,以jar包形式提供服务,无需额外部署和依赖,可理解为增强版的JDBC驱动,完全兼容JDBC和各种ORM框架。

浅谈高性能数据库集群 —— 读写分离_第7张图片 Sharding-JDBC基本架构图
  • 淘宝TDDL 淘宝根据自身业务需求研发了 TDDL ( Taobao Distributed Data Layer )框架,主要用于解决 分库分表场景下的访问路由(持久层与数据访问层的配合)以及异构数据库之间的数据同步 ,它是一个基于集中式配置的 JDBC DataSource 实现,具有分库分表、 Master/Salve 、动态数据源配置等功能。

浅谈高性能数据库集群 —— 读写分离_第8张图片 淘宝TDDL基本架构图

解决方案2 服务端中间件封装

基本架构图

浅谈高性能数据库集群 —— 读写分离_第9张图片 服务端中间件封装实现分配基本架构图 浅谈高性能数据库集群 —— 读写分离_第10张图片 服务端中间件封装

业界开源实现

  • MySQL官方推荐的MySQL Router

浅谈高性能数据库集群 —— 读写分离_第11张图片 MySQL Router架构图

MySQL Router是轻量级的中间件,可在应用程序和任何后端MySQL服务器之间提供透明路由。它可以用于各种各样的用例,例如通过有效地将数据库流量路由到适当的后端MySQL服务器来提供高可用性和可伸缩性。可插拔架构还使开发人员能够扩展MySQL Router以用于自定义用例。

基于MySQL Router可以实现读写分离,故障自动切换,负载均衡,连接池等功能。

  • MySQL官方提供的MySQL Proxy

    浅谈高性能数据库集群 —— 读写分离_第12张图片 MySQL Proxy
  • 360开源的Atlas

浅谈高性能数据库集群 —— 读写分离_第13张图片 Atlas架构图形象表示 浅谈高性能数据库集群 —— 读写分离_第14张图片 Atlas总体架构

Atlas是由平台部基础架构团队开发维护的一个基于MySQL协议的数据中间层项目。它是在mysql-proxy的基础上,对其进行了优化,增加了一些新的功能特性。

常见的开源数据库中间件对比

功能 Sharding-JDBC TDDL Amoeba Cobar MyCat
基于客户端还是服务端 客户端 客户端 服务端 服务端 服务端
分库分表
MySQL交互协议 JDBC Driver JDBC Driver 前端用NIO,后端用JDBC Driver 前端用NIO,后端用BIO 前后端均用NIO
支持的数据库 任意 任意 任意 MySQL 任意

参考

从0开始学架构——李运华

Mycat原理解析-Mycat架构分析




如果你对 Dubbo / Netty 等等源码与原理感兴趣,欢迎加入我的知识星球一起交流。长按下方二维码噢

浅谈高性能数据库集群 —— 读写分离_第15张图片

目前在知识星球更新了《Dubbo 源码解析》目录如下:

01. 调试环境搭建
02. 项目结构一览
03. 配置 Configuration
04. 核心流程一览

05. 拓展机制 SPI

06. 线程池

07. 服务暴露 Export

08. 服务引用 Refer

09. 注册中心 Registry

10. 动态编译 Compile

11. 动态代理 Proxy

12. 服务调用 Invoke

13. 调用特性 

14. 过滤器 Filter

15. NIO 服务器

16. P2P 服务器

17. HTTP 服务器

18. 序列化 Serialization

19. 集群容错 Cluster

20. 优雅停机

21. 日志适配

22. 状态检查

23. 监控中心 Monitor

24. 管理中心 Admin

25. 运维命令 QOS

26. 链路追踪 Tracing

... 一共 69+ 篇

目前在知识星球更新了《Netty 源码解析》目录如下:

01. 调试环境搭建
02. NIO 基础
03. Netty 简介
04. 启动 Bootstrap

05. 事件轮询 EventLoop

06. 通道管道 ChannelPipeline

07. 通道 Channel

08. 字节缓冲区 ByteBuf

09. 通道处理器 ChannelHandler

10. 编解码 Codec

11. 工具类 Util

... 一共 61+ 篇


目前在知识星球更新了《数据库实体设计》目录如下:


01. 商品模块
02. 交易模块
03. 营销模块
04. 公用模块

... 一共 17+ 篇


目前在知识星球更新了《Spring 源码解析》目录如下:


01. 调试环境搭建
02. IoC Resource 定位
03. IoC BeanDefinition 载入

04. IoC BeanDefinition 注册

05. IoC Bean 获取

06. IoC Bean 生命周期

... 一共 35+ 篇


源码不易↓↓↓

点赞支持老艿艿↓↓


你可能感兴趣的:(浅谈高性能数据库集群 —— 读写分离)