mysqljava分库分库分表

分库分表(3)——ShardingJDBC实践

一、ShardingSphere产品介绍ApacheShardingSphere是一套开源的分布式数据库中间件解决方案组成的生态圈，它由JDBC、Proxy和Sidecar（规划中）这3款相互独立，却又能够混合部署配合使用的产品组成。它们均提供标准化的数据分片、分布式事务和数据库治理功能，可适用于如Java同构、异构语言、云原生等各种多样化的应用场景。一套开源的分布式数据库中间件解决方案。有三个产
yangnk42·2023-10-11 04:41

mycat2.0 分库分表报错 3002 - ERROR-CODE: [MYCAT-3002][ERR_FETCH_METADATA] MetadataManager init fail

1.安装好mycat2.0之后，执行sql进行分库分表DROPTABLE`sys_user`;CREATETABLE`sys_user`(`id`bigint(0)NOTNULLAUTO_INCREMENTCOMMENT'id
浮生若梦l·2023-10-10 18:48

三月

在学习分库分表和分布式事务之前，我一直觉得这两个东西是个庞然大物，让人生畏。动手实践时，那真是一步一坑，那就一个坑一个坑的解决，最终独立完成分库分表和分布式事务实践。
御风_2fd9·2023-10-10 16:50

电商拼团的库存管理

拼团业务流程拼团商品的库存直接从总库存划分一部分库存参与活动（占用），在活动期间，拼团商品的库存和正常售卖的库存互不影响。拼团结束之后将剩余库存返还给总库存，解除占用。
VisionOfQuinn·2023-10-10 15:19

mysql数据库名长可为64字符,MySQL数据库设计规范

3.一般分库名称命名格式是“库通配名
努力奋斗的Brian·2023-10-10 15:09

高并发架构设计

(nginx集群、Tomcat集群)5.做应用集群，应用上面可以做分布式、动静分离、CDN加速6.本地缓存+分布式缓存、DB读写分离分库分表(熔断和限流是保护系统的，而不是应对系
初心myp·2023-10-10 14:17

面试题：我们为什么要分库分表？

在文章开头先抛几个问题：（1）什么时候才需要分库分表呢？我们的评判标准是什么？（2）一张表存储了多少数据的时候，才需要考虑分库分表？（3）数据增长速度很快，每天产生多少数据，才需要考虑做分库分表？
知食份子.·2023-10-10 07:51

seata分布式事务理论概述

分布式事务产生的原因：数据库分库分表应用的SOA化。
Code A Better Life·2023-10-10 07:33

分布式环境下的分库分表问题

三、分库问题可以使用mycat。四、数据迁移问题可以利用程序从原数据库中读取数据再按照新的存储策略存储到相应的数据库表。五、表关联问题跨库关联，可以使用程序中分阶段查询，再整合查询结果
Z_aa67·2023-10-08 20:34

分库分表 & ShardingSphere

基本概念垂直分库和分表是在数据库设计的时候就考虑。随着数据量增加，不要直接考虑分库分表。先使用缓存、读写分离、索引等方式，如果这些方式都不能解决问题了，再使用水平分库和水平分表。
Kramer_149·2023-10-08 16:28

中台订单分库分表测试总结

背景最近也许是“幸存者偏差”的原因，频繁看到不同技术公众号发布的关于《分库分表》的测试方案分享，21年下半年中台订单侧也做了一次分库分表的技术改造，由于21年年底项目忙，一直没有系统性的整理一下，趁着最近有点空闲
转转技术团队·2023-10-08 04:04

分库分表总结

目录一、数据切分（一）垂直（纵向）切分1、概念2、优点3、缺点（二）水平（横向）切分1、概叙2、优点3、缺点（三）水平切分方法1、根据数值范围2、根据数值取模二、分库分表带来的问题1、事务一致性问题2、
俺就不起网名·2023-10-08 04:33

Mysql分库分表会出现什么情况_mysql分库分表总结

一、为什么要分库分表数据库中的数据量是在不断增加的，在未进行分库分表的情况下，随着时间和业务的发展，库中的表会越来越多，表中的数据量也会越来越大，相应地，数据操作，增删改查的开销也会越来越大；另外，由于无法进行分布式部署
了不起的苏小姐·2023-10-08 04:33

分库分表 vs NewSQL数据库

●分布式事务●HA与异地多活●Scale横向扩展与分片机制●分布式SQL支持●存储引擎●成熟度与生态●总结最近与同行科技交流，经常被问到分库分表与分布式数据库如何选择，网上也有很多关于中间件+传统关系数据库
Java小叮当·2023-10-08 04:03

分库分表-理论、方案、问题总结

一、如何进行分库分表1.1.为什么要进行分库分表分库分表是两回事,有可能需要只分库不分表,也有可能只分表不分库.为什么要分表?
程序猿老徐·2023-10-08 04:03

分库分表解决方案

前言因为每个学校学生用餐人数太多，一天订单20万量增长，而且学校使用也在不停的增多，公司最近在搞分库分表，数据分离到不同的库中或表中，所以这段时间了解过数据库的分库分表，也读过很多大神写的博文，基本上知道个大概
方圆几里_曲·2023-10-08 04:03

分库分表理论总结

一、概述分库分表是在面对高并发、海量数量时常见的数据库层面的解决方案。通过把数据分散到不同的数据库中，使得单一数据库的数据量变小来缓解单一数据库的性能问题，从而达到提升数据库性能的目的。
yangnk42·2023-10-08 04:33

【Sharding-JDBC】分库分表理论

-------------------------------------------------引子----------------------------------------------------在信息爆炸的当代，数据库需要存储的数据量也开始呈几倍数增长——这导致了数据库性能的降低。如何解决？一种思路是，提升硬件能力，比如增加存储容量，提升CPU性能等。这种方案成本很高但效果十分有限——
samarua·2023-10-08 04:33

高并发场景下基于 Spring Boot 框架来实现 MySQL 读写分离（附源码）

常用的有以下的实现方法:读写分离、加缓存、主从架构集群、分库分表等，在互联网应用中,大部分都是读多写少的场景,设置两个库,主库和读库,主库的职能是负责写,从库主要是负责读,可以建立读库集群,通过读写职能在数据源上的隔离达到减少读写冲突
独行侠梦·2023-10-07 21:39

高并发场景下基于 Spring Boot 框架来实现 MySQL 读写分离

常用的有以下的实现方法:读写分离、加缓存、主从架构集群、分库分表等，在互联网应用中,大部分都是读多写少的场景,设置两个库,主库和读库,主库的职能是负责写,从库主要是负责读,可以建立读库集群,通过读写职能在数据源上的隔离达到减少读写冲突
java记·2023-10-07 21:08

基于 SpringBoot，来实现MySQL读写分离技术

常用的有以下的实现方法:读写分离、加缓存、主从架构集群、分库分表等，在互联网应用中,大部分都是读多写少的场景,设置两个库,主库和读库。
XuNeely·2023-10-07 21:37

基于springboot的mysql实现读写分离

常用的有以下的实现方法:读写分离、加缓存、主从架构集群、分库分表等，在互联网应用中,大部分都是「读多写少」的场景，设置两个库,主库和读库,「主库的职能是负责写,从库主要是负责读,可以建立读库集群,通过读写职能在数据源上的隔离达到减少读写冲突
new一个对象过日子·2023-10-07 21:37

学会数据库的分库分表，吊打大厂面试官！

前言随着业务的快速发展，数据库已经有了上亿条记录，数据存储达到了上百G,原有的单库单表设计已经无法支持系统的稳定性以及接口的响应速度了，数据库存在大量慢查询，且需要提供对C端这种大访问量场景提供支持。数据库随时面临着宕机的风险，基于此，决定对大表进行治理，下面是对大表改造的一些通用方案实践总结现状DMS单表信息383,997,734条记录的大表，日增量接近70WDMS子表信息347,966,131
程序员小灰·2023-10-07 12:43

开发设计实践：分库分表实现方案

概要首先，我们来思考下面几个问题：1、分库分表的常见方案有哪些？2、基于什么维度来做分库分表？3、分库分表之后带来了什么新的问题？
白云coy·2023-10-07 00:46

分库分表

（1）什么时候才需要分库分表呢？我们的评判标准是什么？（2）一张表存储了多少数据的时候，才需要考虑分库分表？（3）数据增长速度很快，每天产生多少数据，才需要考虑做分库分表？为什么要分库分表？
陈二狗想吃肉·2023-10-06 15:40

09 | 数据库优化方案（二）：写入数据量增加时，如何实现分库分表？

之前提到了在高并发下数据库的一种优化方案：读写分离，它就是依靠主从复制的技术使得数据库实现了数据复制为多份，增强了抵抗大量并发读请求的能力，提升了数据库的查询性能的同事，也提升了数据的安全性。当某一个数据库节点(无论主从)发生故障时，我们还有其他的节点中存储着全量的数据，保证数据不会丢失，此时系统的架构图变成了下面这样。image.png这时，公司传来一个好消息，运营推广持续带来了流量，订单量突破
浥羽醉悠扬·2023-10-06 05:44

NoSQL技术梳理

主要解决什么是NoSQL，为什么要有NoSQL，和NoSQL的使用场景等问题数据库拓展方法：1、memcached缓存2、mysql主从复制，读写分离3、mysql分库分表，水平拆分，mysql集群MyISAM
岸边露伴一动不动·2023-10-05 14:23

这样的Dubbo + Redis千万级分布式超高并发秒杀案例，有点厉害！

；前端优化：减少HTTP请求，合并脚本，使用异步请求，启用浏览器缓存和文件压缩，CDN加速，图片服务器用起来；服务端优化：页面静态化，并发处理，服务降级，限流，消息队列用起来；数据库优化：数据库缓存，分库分表
公众号-老炮说Java·2023-10-05 13:29

MyCat实现分库分表技术

目录一、分库分表1.1介绍1.1.1问题分析1.1.2拆分策略1.1.3垂直拆分1.1.3.1垂直分库1.1.3.2垂直分表1.1.4水平拆分1.1.4.1水平分库1.1.4.2水平分表1.1.5实现技术二
敖云岚·2023-10-05 02:01

mysql面试题16：说说分库与分表的设计？常用的分库分表中间件有哪些？分库分表可能遇到的问题有哪些？

该文章专注于面试，面试只要回答关键点即可，不需要对框架有非常深入的回答，如果你想应付面试，是足够了，抓住关键点面试官：说说分库与分表的设计？
小小鱼儿小小林·2023-10-05 00:40

深入理解MySQL原理之一--如何提升查询SQL的性能

附：深入理解MySQL原理之一--如何提升查询SQL的性能深入理解MySQL原理之二--如何建立高效索引深入理解MySQL原理之三--如何实现事务与分库分表深入理解MySQL原理之四--如何实现高可用深入理解
恰恰虎·2023-10-04 19:40

还在搞MVC？DDD才是yyds！

「关注“石杉的架构笔记”，大厂架构经验倾囊相授」儒猿技术团队最新出品《基于ShardingSphere的分库分表实战》文章来源：【公众号：Java研发】DDD这几年越来越火，资料也很多，大部分的资料都偏向于理论介绍
石杉的架构笔记·2023-10-04 12:32

MySQL进阶_查询优化和索引优化

索引失效案例可以从以下维度对数据库进行优化：索引失效、没有充分利用到索引–索引建立关联查询太多JOIN(设计缺陷或不得已的需求)–SQL优化服务器调优及各个参数设置(缓冲、线程数等）–调整my.cnf数据过多–分库分表虽然
珍珠是蚌的眼泪·2023-10-03 11:50

【Mysql系列】生产问题之mysql死锁和分库分表未带分片键问题

记录生产mysql的问题点。业务场景与问题描述请求一个外部接口时，每天的请求量在900万左右。分为请求项目和回执这两个项目。请求是用来调用外部接口，回执是接收发送的接口。在发送请求前会先插入数据库。在请求后，如果接口返回调用失败，会更新数据库状态为失败。如果发送成功，则会等待上游给出回执消息后，然后更新数据库状态。而在生产运行过程中，半年出现过两次mysql导致的mq消费者堆积的问题。问题分析记录
JobsTribe·2023-10-03 05:10

数据库数据表设计思想一

开发过程中，难免会对数据库进行调整的，保证数据的骨架没有问题【增删字段、添加中间表、加视图都不会造成多大的影响】数据库设计是后端部分需求转换的过程（一般业务）,类比原型设计是前端部分需求转化的过程，通过数据库分库
NIIMP·2023-10-03 05:40

【Redis】五大数据类型 、历史概述、nosql分类

文章目录NoSql概述NoSql年代缓存Memcached+MySQL+垂直拆分（读写分离）分库分表+水平拆分+Mysql集群最近为什么要用NoSqlNoSql的四大分类Redis测试性能五大数据类型keyStringSetHashZset
RenX000·2023-10-03 00:22

mysql xtrabackup 主从_使用 Xtrabackup 在线对MySQL做主从复制

(但当数据量更大时，可能需要考虑分库分表，或使用LVM快照来加快备份速
weixin_39879219·2023-10-02 22:47

mysql xtrabackup 主从_使用 Xtrabackup 在线对MySQL做主从复制【转】

(但当数据量更大时，可能需要考虑分库分表，或使用LVM快照来加快备份速
沧海涂龟·2023-10-02 22:47

Mysql分库分表

1.原理2.ShardingJDBC官网https://shardingsphere.apache.org/2.1水平拆分创建一个新的springboot项目导入依赖,直接将原本的dependencies给覆盖掉org.apache.shardingsphereshardingsphere-jdbc-core-spring-boot-starter5.1.0org.mybatis.spring.b
vcoy·2023-10-02 20:45

Mysql 分布式序列算法

接上文Mysql分库分表1.分布式序列简介在分布式系统下，怎么保证ID的生成满足以上需求？ShardingJDBC支持以上两种算法自动生成ID。
vcoy·2023-10-02 20:09

Redis是否要分库的实践

Redis的分库其实没有带来任何效率上的提升，只是提供了一个命名空间，而这个命名空间可以完全通过key的设计来避开这个问题。一个优雅的Redis的key的设计如下
Kermit2023·2023-10-02 11:43

数据库性能优化方案

数据库优化方案前言数据库性能优化方案SQL调优表结构优化硬件优化架构优化分库分表详解分库单应用单数据库多应用单数据库多应用多数据库分表水平拆分和垂直拆分单库内拆分和多库拆分分库分表带来的复杂性跨库关联查询分布式事务排序
Fong灵·2023-10-01 14:31

分库分表总结

单库单表单库单表是最常见的数据库设计，例如，有一张用户(user)表放在数据库db中，所有的用户都可以在db库中的user表中查到。单库多表随着用户数量的增加，user表的数据量会越来越大，当数据量达到一定程度的时候对user表的查询会渐渐的变慢，从而影响整个DB的性能。如果使用mysql,还有一个更严重的问题是，当需要添加一列的时候，mysql会锁表，期间所有的读写操作只能等待。可以通过某种方式
小小哭包·2023-09-30 21:40

一文快速入门分库分表（必修课）

来自公众号：程序员内点事之前有不少刚入坑Java的粉丝留言，想系统的学习一下分库分表相关技术，可我一直没下定决心搞，眼下赶上公司项目在使用sharing-jdbc对现有MySQL架构做分库分表的改造，所以借此机会出一系分库分表落地实践的文章
码农小光·2023-09-29 18:55

处理Springboot服务tomcat中Timed-Wait Thread过多且不回收问题

除去优化数据库连接，分库分表外，也想尝试快速回收线程。查到一个方法，先记录。编辑内核文件/etc/sysctl.conf，加入以下内容：net.
b哈利路亚d·2023-09-29 16:15

互联网项目的基本优化方式

为了提高项目的并发能力,负载能力,解决大数据存储的问题,我们一般按照项目的三层结构进行优化,具体如下:一.数据层优化1.数据库优化1.搭建数据库集群(读写分离)2.分库分表存储3.使用数据库缓存(内存)
艾尔莎文·2023-09-29 08:33

java进阶--数据库篇（Mysql）

2..常用的优化方法：锁的类型有哪些呢共享锁：排它锁：分库分表怎么做垂直分库：垂直分表：水平分表：分表后ID保证唯
江涛、·2023-09-28 14:52

一种简单的Java延迟处理器

最近做一个新项目时，有这么一个场景：使用TDDL数据库分库分表，且按SQL读写分离。
coder_jerry·2023-09-28 13:28

SpringAOP 切面编程原理解析

前言我们在学习SpringAOP的时候一直听说是面向切面编程，还有经常听到说aop可以用来做日志、做接口调用统计、做分库分表动态切换等等，觉得很神奇，明明我们只使用@Aspect注解了一个独立的class
林子曰·2023-09-28 03:21

分库分表 Sharding-JDBC (详解 2/6)

SpringCloud、Nginx高并发核心编程》大厂必备+大厂必备+大厂必备【博客园总入口】入大厂+涨工资必备：高并发【亿级流量IM实战】实战系列【SpringCloudNginx秒杀】实战系列【博客园总入口】目录：分库分表
40岁资深老架构师尼恩·2023-09-28 00:49
上一页 10 11 12 13 14 15 16 17 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他