分库分表

MySQL 中，分库分表机制和分表分库策略

在MySQL中，分库分表是一种常见的数据库水平扩展方案，用于解决单库单表数据量过大导致的性能瓶颈问题。通过将数据分散到多个数据库或表中，可以提高系统的并发处理能力、降低单点故障风险，并提升查询性能。
小赖同学啊·2025-03-24 11:55

Linux------Redis(软件安装，Linux下和Windows下)，NoSQL（简单了解）

文章目录NoSql1.历史1.单机MySql2.Memcached(缓存)+MySql+垂直拆分(读写分离)3.分库分表+水平拆分+MySql集群4.如今最近的年代5.为什么要使用NoSQL2.什么是NoSQL1
.墨迹.·2025-03-24 05:37

Java面试宝典，kafka优先级队列

为什么要分库分表？首先回答一下为什么要分库分表，答案很简单：数据库出现性能瓶颈。用大白话来说就是数据库快扛不住了。
m0_57081324·2025-03-23 07:02

【第11章】亿级电商平台订单系统-海量数据架构设计

年交易额200亿级）本章知识体系1.核心概念辨析海量数据vs大数据本质区别解析常见认知误区说明2.方法论框架海量数据处理核心思想分布式计算原理数据分片策略弹性扩展机制3.数据库架构设计方法论体系读写分离模式分库分表策略数据分区方案缓存层设计
cherry5230·2025-03-20 18:12

美团Leaf分布式ID生成器：使用详解与核心原理解析

然而，传统的自增ID方案（如数据库自增主键）在分布式场景下面临单点故障、性能瓶颈、分库分表冲突等问题。美团开源的Leaf分布式ID生成器通过创新的设计解决了这些难题，成为业界广泛使用的解决方案之一。
Cloud_.·2025-03-17 19:30

Cannl 数据同步-ES篇

简介2、原理3、模块二、配置MySQL1、使用版本使用版本2、环境要求1）操作系统2）MySQL要求三、配置Canal-server1、下载安装2、**修改配置****单机配置****集群配置****分库分表配置
小Ti客栈·2025-03-15 15:10

SeaTunnel社区「Demo方舟计划」第2期活动上线—— MySQL同步至MySQL数据合并场景实战

这并非孤例，可能大部分新接触数据同步的工程师都会遇到以下情况：72%在分库分表合并场景中遭遇过主键冲突导致
·2025-03-14 12:49

【从0到1构建高并发后端系统：Spring Boot + Redis + RabbitMQ实战指南】

一、架构演进路径图图1：从单体架构到微服务集群的演进过程二、核心优化策略与落地实践1.数据库优化方案分库分表实践：//ShardingSphere分片策略配置spring:shardingsphere:
小怪兽9699·2025-03-10 17:58

Laravel如何实现MySQL分库分表的功能？使用场景是什么？底层原理是什么？

一、MySQL分库分表的定义1.核心定义分库（Sharding）：将数据分散到多个数据库中，以减轻单个数据库的压力。
快点好好学习吧·2025-03-10 02:44

ShardingSphere 和 Spring 的动态数据源切换机制的对比以及原理

动态数据源切换机制的对比及原理一、核心定位对比维度ShardingSphereSpring动态数据源（如AbstractRoutingDataSource）定位分布式数据库中间件轻量级多数据源路由工具核心目标分库分表
龙大.·2025-03-08 07:28

9种 分布式ID生成方案，让你一次学个够

但随着数据日渐增长，主从同步也扛不住了，就需要对数据库进行分库分表，但分库分表后需要有一个唯一ID来标识一条数据，数据
我有一头小花驴·2025-03-07 16:23

Mybatis-Plus 配合Sharding-JDBC 实现分库分表

因此，分库分表策略成为数据库架构优化的重要手段。
drebander·2025-03-06 19:21

狂赞！海量数据迁移方案，免费送给你

一般涉及到分库分表，数据迁移是必须要做的一个工作。那么接下来，笔者就以自己亲身实践过的一次数据迁移经验为依据，向大家介绍一下，当数据量过亿时，进行数
无意摘花·2025-03-06 15:49

golang mysql分表_go分库分表 主从分离例子

网上有很多介绍分库分表的文章，方法很多：```分区表切分垂直切分水平切分区间切分取模切分```这里不细说分库分表简单，但后期会带来一系列的难题：```事务Join分页```**数据库：**```master
连根塞·2025-03-05 04:26

go mysql 中间件_GitHub - wushilong/go-sharding: Mysql 分库分表中间件

Go-Sharding简介数据库分库分表中间件，尽可能兼容ShardingSphere的golang实现，基于小米Gaea魔改，但是路由算法支持ShardingSphere的inline表达式风格，而不是
网络安全技术联盟·2025-03-05 04:25

golang mysql集群_golang mysql分库分表性能实战

按照规矩，这里应该介绍一下golang和分库表，懒得写，跳过。本文主要介绍两种分表方式，hash和range，对应不同对业务特性，假设有这样一个user表，字段id，name，home，balance：user表数量大概1000w条：一个查询大概耗时是这样的：加索引肯定快多了，但是今天咱们讨论的主题不是索引，而是分表，就不给加索引了。接下来是分表了，先假定业务逻辑是用户用昵称登陆，获取用户信息，那
Ishikari Nobito·2025-03-05 04:55

Mycat 与分布式 ID 生成方案

Mycat与分布式ID生成方案1.Mycat简介Mycat是一个开源的分布式数据库中间件，主要用于解决数据库分库分表、读写分离、负载均衡等问题。
今天你慧了码码码码码码码码码码·2025-03-04 12:48

用大白话解释数据库分库分表sharding是什么 有什么用 怎么用

Sharding是什么？Sharding（分片）就像把一整个图书馆的书拆开放到多个小房间，每个房间只存一部分书。这样找书的人不用挤在一个大厅里翻找，效率更高。技术定义：把一个大数据库拆分成多个小数据库（分片），分散到不同服务器上，解决单台服务器性能不足的问题。比如原本一个数据库存10亿条用户数据，拆成10个库，每个存1亿条。场景类比：图书馆分房间：按书的类型（科技、文学）或首字母分房间。电商分订单
心心祥蓉·2025-03-02 07:15

或许我们都被分库分表约束了思维

从业数据库领域三年有余了，从分库分表中间件到数据库团队内核学到了很多东西。也接触了很多项目，包括TiDB、Vitess、Polardb、StarDB等等。
京东云开发者·2025-03-01 19:16

Streaming ELT 同步 MySQL 到 StarRocks

StreamingELT同步MySQL到StarRocks这篇教程将展示如何基于FlinkCDC快速构建MySQL到StarRocks的StreamingELT作业，包含整库同步、表结构变更同步和分库分表同步的功能
慧一居士·2025-03-01 17:39

数据库必知必会系列：数据库分片与分布式事务

文章目录1.背景介绍分库分表分片集群分布式事务数据迁移2.核心概念与联系主从复制活动复制CAP原则BASE理论3.核心算法原理和具体操作步骤以及数学模型公式详细讲解分库分表水平分表垂直分库分片集群垂直拆分水平切分垂直切分水平拆分根据主键范围根据业务字段划分分布式事务两阶段提交协议三阶段提交协议可靠消息最终一致性
AI天才研究院·2025-03-01 03:51

从0-1学习Mysql第七章: 分区与分库分表

第七章:分区与分库分表在大数据时代，单个数据库或表往往难以应对海量数据带来的存储、查询和维护压力。分区、分表和分库分表技术正是在这种背景下应运而生。
一小路一·2025-02-27 18:07

如何进行数据库分库分表

当数据库的数据量增长到一定程度，单一数据库或表可能会遇到性能瓶颈，此时分库分表是一种常见的解决方案。
python资深爱好者·2025-02-26 04:19

MySQL 数据库作发布系统的存储，一天五万条以上的增量， 预 计运维三年,怎么优化？思维导图 代码示例（java 架构)

以下是一些建议和策略：优化策略数据库架构设计分库分表（Sharding）：将数据分散到多个数据库或表中，减轻单个实例的压力。读写分离：使用主从复制，将读操作分流到从服务器上，减少主服务器负载。
用心去追梦·2025-02-25 23:46

分库分表全解析：从原理到实战，破解亿级数据存储难题

一、为什么需要分库分表？随着业务规模的增长，单库单表逐渐暴露出性能瓶颈：数据量过大：单表存储超过1亿条数据时，查询效率显著下降。并发压力高：单一数据库的QPS（每秒查询数）难以支撑高并发场景。
没什么技术·2025-02-24 01:20

MySQL数据库笔记——常见慢查询优化方式

方式一：修改配置文件方式二：通过命令动态启用分析慢查询日志方式一：直接查看日志文件方式二：使用`EXPLAIN`分析查询常见的慢查询优化1.数据类型优化2.索引优化3.SQL查询优化4.分库分表慢查询日志的适
Good Note·2025-02-23 22:58

Spring Boot ShardingJDBC分库分表(草稿)

ShardingJDBC分库分表1.Maven引用org.apache.shardingspheresharding-jdbc-spring-boot-starter4.1.1org.springframework.bootspring-boot-starter-data-jpamysqlmysql-connector-java2
dashalen·2025-02-21 11:32

或许我们都被分库分表约束了思维

从业数据库领域三年有余了，从分库分表中间件到数据库团队内核学到了很多东西。也接触了很多项目，包括TiDB、Vitess、Polardb、StarDB等等。
·2025-02-21 10:26

面试基础--高并发订单系统如何设计

对订单核心数据库进行分库分表，配合缓存（如Redis）减少数据库读写压力。通过消息队列（如Kafka/RabbitMQ）实现异步处理与延迟任务。
WeiLai1112·2025-02-21 00:42

Sharding-JDBC 实现分库分表

分库分表技术成为了解决这些问题的重要手段。Sharding-JDBC作为一款优秀的数据库中间件，能够方便地实现分库分表，提高系统的性能和可扩展性。
一叶飘零_sweeeet·2025-02-20 04:53

20250218 隨筆 垂直分库分表（Vertical Sharding） 和 水平分库分表（Horizontal Sharding）

垂直分库分表（VerticalSharding）和水平分库分表（HorizontalSharding）是数据库拆分的两种策略。
靈臺清明·2025-02-20 03:45

挑战分库分表后实现跨分页查询

想象你有一个图书馆（单库单表），所有书按顺序放在书架上。当你要找第100-110本书时，直接数到第100本就能拿到。但图书馆的书爆炸式增长后，馆长决定：分库：把书分到10个房间（10个数据库）分表：每个房间再分成20个书架（20张表）每个书架只放特定规则的书（比如按ID取模：ID%200）问题来了：当用户要求「按时间倒序排列，显示第1000-1010条数据」时：每个房间的书架都是独立排序的无法直接
·2025-02-18 17:06

MySQL的集群配置和读写分离配置

MySQL重点概念介绍分布式集群方案主从节点复制分库分表mycat读写分离参数配置MySQL主节点MySQL从节点实例讲演分布式部署性能演示独立mysql对比主从复制+读写分离参考资料：浅谈mysql集群浅谈
lqg_zone·2025-02-17 08:29

Java后端微服务架构下的数据库分库分表：Sharding-Sphere

Java后端微服务架构下的数据库分库分表：Sharding-Sphere大家好，我是微赚淘客返利系统3.0的小编，是个冬天不穿秋裤，天冷也要风度的程序猿！
微赚淘客机器人开发者联盟@聚娃科技·2025-02-13 16:49

数据库优化与分库分表策略：提升高并发应用的性能

为了应对这些挑战，分库分表策略成为了后端开发中重要的优化手段之一。
桂月二二·2025-02-12 00:21

分库分表后，有哪些查询问题？该如何解决？

作者简介：大家好，我是码炫码哥，前中兴通讯、美团架构师，现任某互联网公司CTO，兼职码炫课堂主讲源码系列专题代表作：《jdk源码&多线程&高并发》，《深入tomcat源码解析》，《深入netty源码解析》，《深入dubbo源码解析》，《深入springboot源码解析》，《深入spring源码解析》，《深入redis源码解析》等联系qq：184480602，加我进群，大家一起学习，一起进步，一起对
码炫课堂-码哥·2025-02-11 00:53

分库分表详解

分库分表确实有垂直切分和水平切分两种，针对给出的描述，以下是对这两种切分方式的详细分析和验证：垂直切分描述：将表按照功能模块、关系密切程度划分出来，部署到不同的库上。
HUNAG-DA-PAO·2025-02-09 07:02

【面试场景】MySQL分布式主键选取

文章目录一.MySQL的自增主键二.UUID三.雪花ID(推荐)我的博客地址一.MySQL的自增主键适合单表的情况,在分布式分库分表下可能会有一些问题主键冲突问题在分布式系统中，多个数据库节点独立生成自增主键
5faith·2025-02-08 15:04

优化数据库的方法？思维导图 代码示例（java 架构)

分库分表（Sharding）：将大表或高访问频率的数据分散到多个数据库实例中。读写分离：使用主从复制机制减轻主服务器的读压力。缓存机制：引入Red
用心去追梦·2025-02-05 03:15

分库分表后如何进行join操作

在分库分表后的系统中，进行表之间的JOIN操作比在单一数据库表中复杂得多，因为涉及的数据可能位于不同的物理节点或分片中。
fajianchen·2025-02-02 22:46

深入理解Mybatis分库分表执行原理

深入理解Mybatis分库分表执行原理探究分库分表场景下Mybatis是如何将mapper.xml中sql的逻辑表，转换成实际执行时的物理表。
牛马程序员_江·2025-02-02 16:09

【Sharding-Jdbc总结】

文章目录shard-jdbc介绍核心功能分库分表：分布式事务：客户端框架：适用场景核心组件代码实现导包配置文件sql语句java代码shard-jdbc介绍Sharding-JDBC是ApacheShardingSphere
壹佰大多·2025-02-01 12:13

【分布式事务与分库分表】

模式实现4.TCC实现使用hmily实现TCCSpringCloudAlibaba项目中整合Seata来实现分布式事务管理1.启动SeataServer2.整合Seata到SpringCloud微服务分库分表策略分库分表后的分布式事务处理方案
Java程序员廖志伟·2025-01-28 01:58

大表性能优化：从问题到解决方案

1.3分页性能下降1.4锁争用性能优化的总体思路表结构设计优化3.1精简字段类型3.2表拆分：垂直拆分与水平拆分索引优化4.1创建合适的索引4.2避免索引失效SQL优化5.1减少查询字段5.2分页优化分库分表
繁川·2025-01-27 01:18

【Redis】Redis入门以及什么是分布式系统{Redis引入+分布式系统介绍}

文章目录介绍redis的引入分布式系统单机架构应用服务和数据库服务分离【负载均衡】引入更多的应用服务器节点单机架构分布式是什么数据库分离和负载均衡理解负载均衡数据库读写分离引入缓存数据库分库分表引入微服务介绍
阿猿收手吧！·2025-01-25 14:06

sql耗时监控与sql语句日志输出

由于工作上涉及到分库分表查询，需要监测每条sql的执行耗时并打印sql语句，下面分享一下p6spy监控的使用，同时也当做一个学习记录。
心写来潮·2025-01-24 19:22

MySQL 分库分表方案

之前了解过数据库的分库分表，读过几篇博文，但就只知道个模糊概念，而且现在回想起来什么都是模模糊糊的。今天看了一下午的数据库分库分表，看了很多文章，现在做个总结，“摘抄”下来。
·2025-01-23 22:31

MySQL-分库分表

目录一、shardingsphere1、官方文档2、入门环境搭建2.1、引入依赖2.2、创建数据库2.3、sharding-jdbc分片策略配置2.4、事务2.5、mybatis-plus配置3、分片策略3.1、行表达式分片策略3.2、标准分片策略（1）精准分片算法精准分库算法精准分表算法（2）范围分片算法范围分库算法范围分表算法3.3、复合分片策略复合分片算法4、事务4.1、背景4.2、挑战4.
飘飘渺渺渺红尘·2025-01-23 15:49

分库分表实践：单 KEY 业务场景

为了解决这一问题，分库分表技术应运而生，成为支撑大规模业务的重要手段。
rain1309·2025-01-22 14:53

Apache SeaTunnel 2.3.9 正式发布：多项新特性与优化全面提升数据集成能力

本次更新新增了`Helm集群部署、Transform支持多表、Zeta新API、表结构转换、任务提交队列、分库分表合并、列转多行`等多个功能更新！
·2025-01-21 07:40
上一页 1 2 3 4 5 6 7 8 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他