MyCat【分库分表】

分库分表-理论、方案、问题总结

一、如何进行分库分表1.1.为什么要进行分库分表分库分表是两回事,有可能需要只分库不分表,也有可能只分表不分库.为什么要分表?
程序猿老徐·2023-10-08 04:03

分库分表解决方案

前言因为每个学校学生用餐人数太多，一天订单20万量增长，而且学校使用也在不停的增多，公司最近在搞分库分表，数据分离到不同的库中或表中，所以这段时间了解过数据库的分库分表，也读过很多大神写的博文，基本上知道个大概
方圆几里_曲·2023-10-08 04:03

分库分表理论总结

一、概述分库分表是在面对高并发、海量数量时常见的数据库层面的解决方案。通过把数据分散到不同的数据库中，使得单一数据库的数据量变小来缓解单一数据库的性能问题，从而达到提升数据库性能的目的。
yangnk42·2023-10-08 04:33

【Sharding-JDBC】分库分表理论

-------------------------------------------------引子----------------------------------------------------在信息爆炸的当代，数据库需要存储的数据量也开始呈几倍数增长——这导致了数据库性能的降低。如何解决？一种思路是，提升硬件能力，比如增加存储容量，提升CPU性能等。这种方案成本很高但效果十分有限——
samarua·2023-10-08 04:33

高并发场景下基于 Spring Boot 框架来实现 MySQL 读写分离（附源码）

常用的有以下的实现方法:读写分离、加缓存、主从架构集群、分库分表等，在互联网应用中,大部分都是读多写少的场景,设置两个库,主库和读库,主库的职能是负责写,从库主要是负责读,可以建立读库集群,通过读写职能在数据源上的隔离达到减少读写冲突
独行侠梦·2023-10-07 21:39

高并发场景下基于 Spring Boot 框架来实现 MySQL 读写分离

常用的有以下的实现方法:读写分离、加缓存、主从架构集群、分库分表等，在互联网应用中,大部分都是读多写少的场景,设置两个库,主库和读库,主库的职能是负责写,从库主要是负责读,可以建立读库集群,通过读写职能在数据源上的隔离达到减少读写冲突
java记·2023-10-07 21:08

基于 SpringBoot，来实现MySQL读写分离技术

常用的有以下的实现方法:读写分离、加缓存、主从架构集群、分库分表等，在互联网应用中,大部分都是读多写少的场景,设置两个库,主库和读库。
XuNeely·2023-10-07 21:37

基于springboot的mysql实现读写分离

常用的有以下的实现方法:读写分离、加缓存、主从架构集群、分库分表等，在互联网应用中,大部分都是「读多写少」的场景，设置两个库,主库和读库,「主库的职能是负责写,从库主要是负责读,可以建立读库集群,通过读写职能在数据源上的隔离达到减少读写冲突
new一个对象过日子·2023-10-07 21:37

学会数据库的分库分表，吊打大厂面试官！

前言随着业务的快速发展，数据库已经有了上亿条记录，数据存储达到了上百G,原有的单库单表设计已经无法支持系统的稳定性以及接口的响应速度了，数据库存在大量慢查询，且需要提供对C端这种大访问量场景提供支持。数据库随时面临着宕机的风险，基于此，决定对大表进行治理，下面是对大表改造的一些通用方案实践总结现状DMS单表信息383,997,734条记录的大表，日增量接近70WDMS子表信息347,966,131
程序员小灰·2023-10-07 12:43

数据库代理 - mycat

二、mycat1、配置Java环境官网下载jdk压缩包，在/usr/local下解压配置环境变量：vim/etc/profileJAVA_HOME=/usr/local/java→指定家目录PATH=$
Bean295·2023-10-07 08:00

Spring Boot + Redis 操作多种实现

源码精品专栏原创|Java2021超神之路，很肝~中文详细注释的开源项目RPC框架Dubbo源码解析网络应用框架Netty源码解析消息中间件RocketMQ源码解析数据库中间件Sharding-JDBC和MyCAT
Java基基·2023-10-07 01:04

MySQL 分布式架构

MySQL分布式架构1.结构图QQ图片20200107195654.png2.MyCAT基础架构准备2.1环境准备：两台虚拟机db01db02每台创建四个mysql实例：33073308330933102.2
沽铭·2023-10-07 00:41

开发设计实践：分库分表实现方案

概要首先，我们来思考下面几个问题：1、分库分表的常见方案有哪些？2、基于什么维度来做分库分表？3、分库分表之后带来了什么新的问题？
白云coy·2023-10-07 00:46

MyCat安装文档

JDK安装JDK具体安装步骤如下：1.上传安装包使用FinalShell自带的上传工具将jdk的二进制发布包上传到Linux由于上述在进行文件上传时，选择的上传目录为根目录/，上传完毕后，我们执行指令cd/切换到根目录下，查看上传的安装包。2.解压安装包执行如下指令，将上传上来的压缩包进行解压，并通过-C参数指定解压文件存放目录为/usr/local。tar-zxvfjdk-8u171-linux
清风微凉 aaa·2023-10-06 19:19

分库分表

（1）什么时候才需要分库分表呢？我们的评判标准是什么？（2）一张表存储了多少数据的时候，才需要考虑分库分表？（3）数据增长速度很快，每天产生多少数据，才需要考虑做分库分表？为什么要分库分表？
陈二狗想吃肉·2023-10-06 15:40

09 | 数据库优化方案（二）：写入数据量增加时，如何实现分库分表？

之前提到了在高并发下数据库的一种优化方案：读写分离，它就是依靠主从复制的技术使得数据库实现了数据复制为多份，增强了抵抗大量并发读请求的能力，提升了数据库的查询性能的同事，也提升了数据的安全性。当某一个数据库节点(无论主从)发生故障时，我们还有其他的节点中存储着全量的数据，保证数据不会丢失，此时系统的架构图变成了下面这样。image.png这时，公司传来一个好消息，运营推广持续带来了流量，订单量突破
浥羽醉悠扬·2023-10-06 05:44

13-MySQL分布式架构

1.结构图image.png2.MyCAT基础架构准备1.环境准备：两台虚拟机db01db02每台创建四个mysql实例：33073308330933102.节点主从规划箭头指向谁是主库以3307为主库
UncleZ_strive·2023-10-05 21:59

IO 多路复用：C10K 问题

源码精品专栏原创|Java2021超神之路，很肝~中文详细注释的开源项目RPC框架Dubbo源码解析网络应用框架Netty源码解析消息中间件RocketMQ源码解析数据库中间件Sharding-JDBC和MyCAT
Java基基·2023-10-05 19:17

NoSQL技术梳理

主要解决什么是NoSQL，为什么要有NoSQL，和NoSQL的使用场景等问题数据库拓展方法：1、memcached缓存2、mysql主从复制，读写分离3、mysql分库分表，水平拆分，mysql集群MyISAM
岸边露伴一动不动·2023-10-05 14:23

这样的Dubbo + Redis千万级分布式超高并发秒杀案例，有点厉害！

；前端优化：减少HTTP请求，合并脚本，使用异步请求，启用浏览器缓存和文件压缩，CDN加速，图片服务器用起来；服务端优化：页面静态化，并发处理，服务降级，限流，消息队列用起来；数据库优化：数据库缓存，分库分表
公众号-老炮说Java·2023-10-05 13:29

MyCat实现分库分表技术

目录一、分库分表1.1介绍1.1.1问题分析1.1.2拆分策略1.1.3垂直拆分1.1.3.1垂直分库1.1.3.2垂直分表1.1.4水平拆分1.1.4.1水平分库1.1.4.2水平分表1.1.5实现技术二
敖云岚·2023-10-05 02:01

常用的分库分表中间件有哪些？分库分表可能遇到的问题有哪些？

该文章专注于面试，面试只要回答关键点即可，不需要对框架有非常深入的回答，如果你想应付面试，是足够了，抓住关键点面试官：说说分库与分表的设计？在MySQL中，分库与分表是常用的数据库水平扩展技术，可以提高数据库的吞吐量和扩展性。下面将具体讲解MySQL中分库与分表的设计。分库设计：分库即将一个大的数据库拆分为多个小的数据库，每个数据库独立存储一部分数据。分库设计可以根据业务需求、数据量和负载情况来确
小小鱼儿小小林·2023-10-05 00:40

深入理解MySQL原理之一--如何提升查询SQL的性能

附：深入理解MySQL原理之一--如何提升查询SQL的性能深入理解MySQL原理之二--如何建立高效索引深入理解MySQL原理之三--如何实现事务与分库分表深入理解MySQL原理之四--如何实现高可用深入理解
恰恰虎·2023-10-04 19:40

面试官问：Kafka 会不会丢消息？怎么处理的?

源码精品专栏原创|Java2020超神之路，很肝~中文详细注释的开源项目RPC框架Dubbo源码解析网络应用框架Netty源码解析消息中间件RocketMQ源码解析数据库中间件Sharding-JDBC和MyCAT
Java基基·2023-10-04 18:18

还在搞MVC？DDD才是yyds！

「关注“石杉的架构笔记”，大厂架构经验倾囊相授」儒猿技术团队最新出品《基于ShardingSphere的分库分表实战》文章来源：【公众号：Java研发】DDD这几年越来越火，资料也很多，大部分的资料都偏向于理论介绍
石杉的架构笔记·2023-10-04 12:32

MySQL进阶_查询优化和索引优化

索引失效案例可以从以下维度对数据库进行优化：索引失效、没有充分利用到索引–索引建立关联查询太多JOIN(设计缺陷或不得已的需求)–SQL优化服务器调优及各个参数设置(缓冲、线程数等）–调整my.cnf数据过多–分库分表虽然
珍珠是蚌的眼泪·2023-10-03 11:50

【Mysql系列】生产问题之mysql死锁和分库分表未带分片键问题

记录生产mysql的问题点。业务场景与问题描述请求一个外部接口时，每天的请求量在900万左右。分为请求项目和回执这两个项目。请求是用来调用外部接口，回执是接收发送的接口。在发送请求前会先插入数据库。在请求后，如果接口返回调用失败，会更新数据库状态为失败。如果发送成功，则会等待上游给出回执消息后，然后更新数据库状态。而在生产运行过程中，半年出现过两次mysql导致的mq消费者堆积的问题。问题分析记录
JobsTribe·2023-10-03 05:10

【Redis】五大数据类型 、历史概述、nosql分类

文章目录NoSql概述NoSql年代缓存Memcached+MySQL+垂直拆分（读写分离）分库分表+水平拆分+Mysql集群最近为什么要用NoSqlNoSql的四大分类Redis测试性能五大数据类型keyStringSetHashZset
RenX000·2023-10-03 00:22

mysql xtrabackup 主从_使用 Xtrabackup 在线对MySQL做主从复制

(但当数据量更大时，可能需要考虑分库分表，或使用LVM快照来加快备份速
weixin_39879219·2023-10-02 22:47

mysql xtrabackup 主从_使用 Xtrabackup 在线对MySQL做主从复制【转】

(但当数据量更大时，可能需要考虑分库分表，或使用LVM快照来加快备份速
沧海涂龟·2023-10-02 22:47

Mysql分库分表

1.原理2.ShardingJDBC官网https://shardingsphere.apache.org/2.1水平拆分创建一个新的springboot项目导入依赖,直接将原本的dependencies给覆盖掉org.apache.shardingsphereshardingsphere-jdbc-core-spring-boot-starter5.1.0org.mybatis.spring.b
vcoy·2023-10-02 20:45

Mysql 分布式序列算法

接上文Mysql分库分表1.分布式序列简介在分布式系统下，怎么保证ID的生成满足以上需求？ShardingJDBC支持以上两种算法自动生成ID。
vcoy·2023-10-02 20:09

数据库性能优化方案

数据库优化方案前言数据库性能优化方案SQL调优表结构优化硬件优化架构优化分库分表详解分库单应用单数据库多应用单数据库多应用多数据库分表水平拆分和垂直拆分单库内拆分和多库拆分分库分表带来的复杂性跨库关联查询分布式事务排序
Fong灵·2023-10-01 14:31

Mycat1的配置-server.xml (一）

server.xml中保存了几乎所有mycat需要的系统配置信息，包括用户和防火墙配置user标签user标签用来配置mycat的用户和权限在user标签中，使用property子标签来定义用户名和密码等信息
月饮沙·2023-10-01 11:04

20个使用 Java CompletableFuture的例子

源码精品专栏原创|Java2020超神之路，很肝~中文详细注释的开源项目RPC框架Dubbo源码解析网络应用框架Netty源码解析消息中间件RocketMQ源码解析数据库中间件Sharding-JDBC和MyCAT
Java基基·2023-10-01 07:27

分库分表总结

单库单表单库单表是最常见的数据库设计，例如，有一张用户(user)表放在数据库db中，所有的用户都可以在db库中的user表中查到。单库多表随着用户数量的增加，user表的数据量会越来越大，当数据量达到一定程度的时候对user表的查询会渐渐的变慢，从而影响整个DB的性能。如果使用mysql,还有一个更严重的问题是，当需要添加一列的时候，mysql会锁表，期间所有的读写操作只能等待。可以通过某种方式
小小哭包·2023-09-30 21:40

MySQL8.0.16主从复制、半同步复制、并行复制、读写分离mycat(docker)、MHA搭建

提示：这里的主库和从库ip一定要更具自己的ip来，我这里的搭建环境不都是在一个环境下搭建的，请看好自己的主从ip主从复制实战主库my.cnf文件配置路径/etc/mysqlvim/etc/mysql/my.cnf(docker)vim/etc/my.cnf(linux)[mysqld]log_bin=mysql-binserver-id=1sync-binlog=1binlog-ignore-db
没事别学JAVA·2023-09-30 16:31

数据库压测工具Sysbench-0.4.12安装

分布式数据库中间件我们技术选型选择了mycat。这无疑前期的准备工作需要做好，在运维同学的帮助下，集群已经搭建好，接下来我们任务就是压测。
程序员七哥·2023-09-30 04:25

一文快速入门分库分表（必修课）

来自公众号：程序员内点事之前有不少刚入坑Java的粉丝留言，想系统的学习一下分库分表相关技术，可我一直没下定决心搞，眼下赶上公司项目在使用sharing-jdbc对现有MySQL架构做分库分表的改造，所以借此机会出一系分库分表落地实践的文章
码农小光·2023-09-29 18:55

处理Springboot服务tomcat中Timed-Wait Thread过多且不回收问题

除去优化数据库连接，分库分表外，也想尝试快速回收线程。查到一个方法，先记录。编辑内核文件/etc/sysctl.conf，加入以下内容：net.
b哈利路亚d·2023-09-29 16:15

互联网项目的基本优化方式

为了提高项目的并发能力,负载能力,解决大数据存储的问题,我们一般按照项目的三层结构进行优化,具体如下:一.数据层优化1.数据库优化1.搭建数据库集群(读写分离)2.分库分表存储3.使用数据库缓存(内存)
艾尔莎文·2023-09-29 08:33

OAuth2 vs JWT，到底怎么选？

源码精品专栏原创|Java2021超神之路，很肝~中文详细注释的开源项目RPC框架Dubbo源码解析网络应用框架Netty源码解析消息中间件RocketMQ源码解析数据库中间件Sharding-JDBC和MyCAT
Java基基·2023-09-29 06:50

SpringCloud+OAuth2+Redis实现的微服务统一认证授权

源码精品专栏原创|Java2020超神之路，很肝~中文详细注释的开源项目RPC框架Dubbo源码解析网络应用框架Netty源码解析消息中间件RocketMQ源码解析数据库中间件Sharding-JDBC和MyCAT
Java基基·2023-09-29 06:49

OAuth2 和 JWT - 如何设计安全的 API？

源码精品专栏原创|Java2020超神之路，很肝~中文详细注释的开源项目RPC框架Dubbo源码解析网络应用框架Netty源码解析消息中间件RocketMQ源码解析数据库中间件Sharding-JDBC和MyCAT
公众号-芋道源码·2023-09-29 06:17

java进阶--数据库篇（Mysql）

2..常用的优化方法：锁的类型有哪些呢共享锁：排它锁：分库分表怎么做垂直分库：垂直分表：水平分表：分表后ID保证唯
江涛、·2023-09-28 14:52

一种简单的Java延迟处理器

最近做一个新项目时，有这么一个场景：使用TDDL数据库分库分表，且按SQL读写分离。
coder_jerry·2023-09-28 13:28

SpringAOP 切面编程原理解析

前言我们在学习SpringAOP的时候一直听说是面向切面编程，还有经常听到说aop可以用来做日志、做接口调用统计、做分库分表动态切换等等，觉得很神奇，明明我们只使用@Aspect注解了一个独立的class
林子曰·2023-09-28 03:21

分库分表 Sharding-JDBC (详解 2/6)

SpringCloud、Nginx高并发核心编程》大厂必备+大厂必备+大厂必备【博客园总入口】入大厂+涨工资必备：高并发【亿级流量IM实战】实战系列【SpringCloudNginx秒杀】实战系列【博客园总入口】目录：分库分表
40岁资深老架构师尼恩·2023-09-28 00:49

Java+Vue 实现的在线考试系统

源码精品专栏原创|Java2020超神之路，很肝~中文详细注释的开源项目RPC框架Dubbo源码解析网络应用框架Netty源码解析消息中间件RocketMQ源码解析数据库中间件Sharding-JDBC和MyCAT
Java基基·2023-09-27 21:39

SpringMVC+Mybatis之多数据源搭建

使用场景：当我们的生产数据在逐渐增多，数据库分库分表技能也变得很常见。那么假如说，我们也用户表放到DB1，把订单表放到DB2…等。那么我们查询的时候，要根据不同的
prisoner_mirror·2023-09-27 21:20
上一页 13 14 15 16 17 18 19 20 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他