MyCat【分库分表】

MySQL：互联网公司常用分库分表方案汇总

一、数据库瓶颈不管是IO瓶颈，还是CPU瓶颈，最终都会导致数据库的活跃连接数增加，进而逼近甚至达到数据库可承载活跃连接数的阈值。在业务Service来看就是，可用数据库连接少甚至无连接可用。接下来就可以想象了吧(并发量、吞吐量、崩溃)。1、IO瓶颈第一种：磁盘读IO瓶颈，热点数据太多，数据库缓存放不下，每次查询时会产生大量的IO，降低查询速度->分库和垂直分表。第二种：网络IO瓶颈，请求的数据太多
呆呆不呆丫·2023-09-20 11:01

分库分表-分片键

在分库分表中，输入关键字指的
信仰_273993243·2023-09-20 09:39

互联网架构演进方向

目录1业务架构1.1单体模式1.2中台战略1.2.1概述1.2.2背景1.2.3案例1.3总结与思考2数据架构2.1单数据库2.2主从读写2.3分库分表2.4高速缓存2.5数据多样化2.5.1分布式文件
赵广陆·2023-09-19 19:45

架构问题：技术选型

支持读写分离、分库分表、事务、索引。适用场景：Web网站系统、日志记录系统、数据仓库系统、嵌入式系统2.Oracle：全球最大的商业数据库软件公司之一，提供各种可扩展的解决方案，适用于从小型应用到大
青鱼入云·2023-09-19 19:54

mysql主从配置

1：mycat是什么，以及mycat原理，我这里就不说了，百度一下，让我说，我也是百度，只上干货记录学习2：环境准备说明（一台虚拟机，一个mac本机）(1).mac本机mysql作为slave;虚拟机linux
烟雾袅绕·2023-09-19 10:34

一文搞懂分库分表算法，通俗易懂（基因法、一致性 hash、时间维度）

一文搞懂分库分表算法，通俗易懂（基因法、一致性hash、时间维度）目录前言分库分表算法-时间维度分库分表算法-基因替换法（使用）分库分表算法-基因替换法（缺点之扩容难）分库分表算法-基因替换法（缺点之容易生成重复订单号
张子行的博客·2023-09-19 06:00

Centos7 Mysql 集群--之六(MYCAT安装)

解压安装(安装前需先安装JDK1.8)#上传文件Mycat-server-1.6.5-release-20180122220033-linux.tar.gz到/usr/local/src目录下[root
轻飘飘D·2023-09-19 06:18

Redis 集群的分库和分片

就像我们做数据库分库分表，一旦决策了分库分表，通常一次就会分到位，比如搞上8或16个库，每个库再分256或1024个表。
达微·2023-09-19 02:46

分库分表第四篇之分页查询优化方案

在分库分表中，查询就不能像以前单库那么玩了，不然效率会很低哦，这又是为什么呢？且看本节进行详细说明。Sharding-Jdbc分页修正从多个数据库获取分页数据与单数据库的场景是不同的。
小螺丝钉cici·2023-09-18 18:55

分库分表：存量1亿，日增量500万如何分库分表？

分库分表我们经常把分库分表放在一起说，理论上其实分库和分表达到的效果是相同的，分库分表是为了减轻数据库压力，提高效率。
盖丽男·2023-09-18 16:00

ShardingSphere-JDBC 分库分表

可以通过简单的配置实现分库分表和读写分离。ShardingSphere提供了两种分布式数据库解决方案：ShardingSphere-JDBC和ShardingSphere-Proxy。
小虎哥的技术博客·2023-09-18 13:09

11. Leaf-segment 分布式ID

然而，当应用程序需要进行分库分表时，即将数据分散到多个数据库和数据表中，使用数据库自增的方式会导致id在不同表中重复，那么就需要使用分布式id来确保不同表中id的唯一性。
小虎哥的技术博客·2023-09-18 13:39

一次 SQL 查询优化原理分析（900W+ 数据，从 17s 到 300ms）

笔者所有文章第一时间发布于：hhbbz的个人博客场景描述有一张财务流水表，未分库分表，目前的数据量为9555695，分页查询使用到了limit，优化之前的查询耗时16s938ms(execution:16s831ms
虾餃·2023-09-18 11:57

分库分表之sharding-jdbc

教学视频：https://edu.csdn.net/course/detail/26238/325885一，简介定位为轻量级Java框架，在Java的JDBC层提供的额外服务。它使用客户端直连数据库，以jar包形式提供服务，无需额外部署和依赖，可理解为增强版的JDBC驱动，完全兼容JDBC和各种ORM框架。适用于任何基于JDBC的ORM框架，如：JPA,Hibernate,Mybatis,Spri
归来少年Plus·2023-09-17 17:53

mycat操作文档

mycat入门使用一.数据库中间件Mycat是数据库中间件，就是介于数据库与应用之间，进行数据处理与交互的中间服务。
归来少年Plus·2023-09-17 17:22

数据库分库分表笔记

参考文章链接cnblogs.com/butterfly100/p/9034281.html一、数据切分关系型数据库本身比较容易成为系统瓶颈，单机存储容量、连接数、处理能力都有限。当单表的数据量达到1000W或100G以后，由于查询维度较多，即使添加从库、优化索引，做很多操作时性能仍下降严重。此时就要考虑对其进行切分了，切分的目的就在于减少数据库的负担，缩短查询时间。数据库分布式核心内容无非就是数据
小叮做事小叮当_b561·2023-09-17 06:00

【数据库】分库分表分区

目录前言拆分方式水平拆分（Sharding）垂直拆分分区项目中分库分表涉及的问题1.为什么要分库分表2.技术选型3.分片策略以及如何扩缩容/迁移（1）根据范围range分表（2）根据hash取模参考分库分表如何迁移数据
dreambyday·2023-09-17 06:32

第一章

Java并发编程与高并发解决方案知识点：线程安全；线程封闭；线程调度；同步容器；并发容器；AQS；J.UC高并发的解决思路与手段：扩容，缓存，队列，拆分，服务降级与熔断，数据库切库，分库分表基本概念：并发
YoungChen_·2023-09-16 20:30

SpringBoot 整合阿里开源 Canal 实现数据增量同步

但是随着业务量增大，数据量变多以及各种复杂场景下的分库分表的实现，使数据同步变得越来越困难。今天这篇文章使用阿里开源的中间件Canal解决数据增量同步的痛点。文章目录如下：Canal是什么？c
long_far·2023-09-16 15:37

Linux学习之MyCat实现分库分表

环境准备先准备一套MySQL主从服务器，可参考MySQL主从配置配置MyCat服务资源下载网盘链接:https://pan.baidu.com/s/1cLTMH_e1-6loc_gF9ZNHTg?
丢爸·2023-09-16 13:38

Spring Boot业务系统如何实现海量数据高效实时搜索

在阿里巴巴开发手册中也建议：单表行数超过500万行或者单表容量超过2GB才推荐进行分库分表，如果预计三年后数据量根本达不到这个级别，请不要在创建表时就分库分表。
shepherd126·2023-09-15 23:11

Spring Boot业务系统如何实现海量数据高效实时搜索

在阿里巴巴开发手册中也建议：单表行数超过500万行或者单表容量超过2GB才推荐进行分库分表，如果预计三年后数据量根本达不到这个级别，请不要在创建表时就分库分表。
shepherd126·2023-09-15 23:39

安排，Mycat教程-分布式数据库中间件课程

目录如下：01.数据中间件-mycat简介02.数据中间件-数据库中间件对比03.数据中间件-Mycat作用04.数据中
Java小咖秀·2023-09-15 14:41

SpringCloud微服务实战——搭建企业级开发框架（二十七）：集成多数据源+Seata分布式事务+读写分离+分库分表

目前有多种方式实现读写分离，一种是Mycat这种数据库中间件，需要单独部署服务，通过配置来实现读写分离，不侵入到业务代码中；还有一种是dynamic-datasource/shardingsphere-jdbc
全栈程序猿·2023-09-15 14:05

ShardingSphere 分库分表实战

一.简介sharding-sphere官网地址:https://shardingsphere.apache.org/ShardingSphere是一套开源的分布式数据库中间件解决方案组成的生态圈，它由Sharding-JDBC、Sharding-Proxy和Sharding-Sidecar（计划中）这3款相互独立的产品组成。他们均提供标准化的数据分片、分布式事务和数据库治理功能，可适用于如Java
七月_JulyFY·2023-09-14 18:21

Mycat单库分表

Mycat单库分表一、准备工作1.MySQL主从同步、JDK。2.mycat解压即可，无需安装。3.如果用的是云服务器，需要开放8066端口。
喝着咖啡敲代码·2023-09-14 17:17

Spring Boot MyBatis 数据库集群读写分离实现验证

SpringBoot实现方式读写分离要做的事情就是对于一条SQL该选择哪个数据库去执行，至于谁来做选择数据库这件事儿，一般来讲，主要有两种实现方式，分别为：1.使用中间件，比如Atlas，cobar，TDDL，mycat
柠檬冰块·2023-09-14 17:29

分布式全局唯一ID生成策略及算法

在设计初期，我们需要考虑日后数据量的级别，如果可能会对数据进行分库分表，那么就需要有一个全局唯一id来标识一条数据或记录。生成唯一id的策略有多种，但是每种策略都有它的适用场景、优点以及局限性。
程序猿微刊·2023-09-13 19:28

MybatisPlus 使用 saveOrUpdate() 方法踩坑记录（慎用）

源码精品专栏原创|Java2021超神之路，很肝~中文详细注释的开源项目RPC框架Dubbo源码解析网络应用框架Netty源码解析消息中间件RocketMQ源码解析数据库中间件Sharding-JDBC和MyCAT
公众号-芋道源码·2023-09-13 08:15

分库分表知识点

分库分表专题1.概述1.1分库分表是什么小明是一家初创电商平台的开发人员，他负责卖家模块的功能开发，其中涉及了店铺、商品的相关业务，设计如下数据库：通过以下SQL能够获取到商品相关的店铺信息、地理区域信息
胖成范德彪·2023-09-13 07:30

【大数据】美团 DB 数据同步到数据仓库的架构与实践

.背景2.整体架构3.Binlog实时采集4.离线还原MySQL数据5.Kafka2Hive6.对Camus的二次开发7.Checkdone的检测逻辑8.Merge9.Merge流程举例10.实践一：分库分表的支持
G皮T·2023-09-13 06:51

软件架构设计(十六) Web架构设计(三)

还有一种就是按照业务进行数据库和表的拆分（垂直分库，水平分表），也就是我们的分库分表操作。减少数据库的IO操作，因为数据库的数据通常是放在磁盘上，所以读写操作数据库需要进行大量的I/O操作。
码农小何·2023-09-13 04:47

MySQL之分布式事务

写在前面当数据库进行了分库分表之后为了保证数据的一致性。不可变的就需要引入跨数据的事务解决方案，这种解决方案我们叫做分布式事务。本文就一起来看下分布式事务相关的内容。在8.0版本上学习。
一户董·2023-09-13 03:21

Mysql 学习笔记：分库分表 (sharding)

当数据库性能出现瓶颈时就需要通过扩展来提升性能，对于扩展性来说要么加强机器本身的性能，要么把任务分发到不同的机器上。对于数据库来说通过强悍的机器解决成本是很大的，如Oracle。通过多个廉价的机器实现水平扩展是现代的主流解决方案，如Mysql。数据库水平扩展的核心是把数据拆分成不同的单元并放在不同的独立的实例上，这样就做到了负载均衡。拆分分为逻辑和物理拆分，逻辑拆分是对物理上不可分割的实例进行逻辑
马迪奥1·2023-09-13 01:22

Sharding-JDBC分库分表-自定义分片算法-4

默认分片算法ShardingJDBC通过org.apache.shardingsphere.sharding.spi.ShardingAlgorithm接口定义了数据分片算法，5.2.1版本默认提供了如下的分片算法配置标识自动分片算法详细说明类名MODY基于取模的分片算法ModShardingAlgorithmHASH_MODY基于哈希取模的分片算法HashModShardingAlgorithm
Alexon Xu·2023-09-13 00:53

Sharding-JDBC分库分表-分布式事务-5

分布式事务ShardingJDBC事务介绍分库分表必然会涉及到分布式事务的问题，关于这方面，shardingJDBC为用户提供了两种分布式事务解决方案：XA事务和BASE事务，这两个的区别是：XA事务，
Alexon Xu·2023-09-13 00:51

数据库性能提升利器—Mycat数据切分

所以我们要对数据库进行强化，就用到了Mycat。二、何为数据切分？简单来说，就是指通过某种特定的条件，把我们存放在同一个数据库中的数据分散存储到多个数据库里。
IT编程大神进阶·2023-09-12 16:00

分库分表---理论

目录一、垂直切分1、垂直分库2、垂直分表3、垂直切分优缺点二、水平切分1、水平分库2、水平分表3、水平切分优缺点三、数据分片规则1、Hash取模分表2、数值Range分表3、一致性Hash算法四、分库分表带来的问题
Upaaui·2023-09-12 14:03

MySQL从入门到精通【实践篇】之使用Sharding-JDBC 分库分表详解

文章目录0.前言本文技术组件版本基本介绍2.使用和配置：步骤1引入依赖步骤2配置数据源和分片策略步骤3核心代码MybatisPlusConfig核心配置OrderServiceOrderServiceImplOrderInfoOrderMapperOrderControllerBaseMapper3.数据库分片配置在我的demo工程中大家可以看到如下的配置3.1表的分片策略3.2分片算法3.3.自
冰点.·2023-09-12 10:20

java生成8位的uuid_分布式系统全局唯一ID简介、特点、生成

如在金融、电商、支付、等产品的系统中，数据日渐增长，对数据分库分表后需要有一个唯一ID来标识一条数据或消息，数据库的自增ID显然不能满足需求，此时一个能够生成全局唯一ID的系统是非常必要的。
weixin_39647499·2023-09-11 18:47

听说 Spring AOP 有坑？那就来踩一踩

源码精品专栏原创|Java2020超神之路，很肝~中文详细注释的开源项目RPC框架Dubbo源码解析网络应用框架Netty源码解析消息中间件RocketMQ源码解析数据库中间件Sharding-JDBC和MyCAT
公众号-芋道源码·2023-09-11 14:10

31.9k！这是我见过最强的后台管理系统 ！！

源码精品专栏原创|Java2021超神之路，很肝~中文详细注释的开源项目RPC框架Dubbo源码解析网络应用框架Netty源码解析消息中间件RocketMQ源码解析数据库中间件Sharding-JDBC和MyCAT
Java基基·2023-09-11 08:06

公司用的 MySQL 团队开发规范，太详细了，建议收藏！

源码精品专栏原创|Java2021超神之路，很肝~中文详细注释的开源项目RPC框架Dubbo源码解析网络应用框架Netty源码解析消息中间件RocketMQ源码解析数据库中间件Sharding-JDBC和MyCAT
Java基基·2023-09-11 08:36

Spring Boot 接入支付宝支付的 SDK 方法

源码精品专栏原创|Java2021超神之路，很肝~中文详细注释的开源项目RPC框架Dubbo源码解析网络应用框架Netty源码解析消息中间件RocketMQ源码解析数据库中间件Sharding-JDBC和MyCAT
Java基基·2023-09-11 08:36

图片提取文字功能很神奇？Java几行代码搞定它！

源码精品专栏原创|Java2021超神之路，很肝~中文详细注释的开源项目RPC框架Dubbo源码解析网络应用框架Netty源码解析消息中间件RocketMQ源码解析数据库中间件Sharding-JDBC和MyCAT
Java基基·2023-09-11 08:35

31.4k！这是我见过最强的后台管理系统 ！！

源码精品专栏原创|Java2021超神之路，很肝~中文详细注释的开源项目RPC框架Dubbo源码解析网络应用框架Netty源码解析消息中间件RocketMQ源码解析数据库中间件Sharding-JDBC和MyCAT
公众号-芋道源码·2023-09-11 08:34

看看人家的快速开发平台，确实清新优雅！

源码精品专栏原创|Java2021超神之路，很肝~中文详细注释的开源项目RPC框架Dubbo源码解析网络应用框架Netty源码解析消息中间件RocketMQ源码解析数据库中间件Sharding-JDBC和MyCAT
公众号-芋道源码·2023-09-11 08:34

Mycat2学习3-搭建一主一从读写分离

我们通过Mycat和MySQL的主从复制配合搭建数据库的读写分离，实现MySQL的高可用性。我们将搭建:一主一从、双主双从两种读写分离模式。
那钱有着落吗·2023-09-11 07:49

python中的继承

_(self,name,age):self.name=nameself.age=agedefjump(self):print(self.name+"在跳")创建子类classCat(Pet):passmycat
Chen_Chance·2023-09-11 00:03

ShardingSphere分库分表（一）：高性能架构模式

互联网业务兴起之后，海量用户加上海量数据的特点，单个数据库服务器已经难以满足业务需要，必须考虑数据库集群的方式来提升性能。高性能数据库集群的第一种方式是“读写分离”，第二种方式是“数据库分片”。文章目录1、读写分离架构2、数据库分片架构2.1、垂直分片2.2、水平分片3、读写分离和数据分片架构4、实现方式4.1、程序代码封装4.2、中间件封装4.3、常用解决方案1、读写分离架构**读写分离原理：*
鹤冲天Pro·2023-09-10 15:18
上一页 15 16 17 18 19 20 21 22 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他