分库分表.

MySQL 数据库设计规范（存档）

MySQL数据库设计规范目录1.规范背景与目的2.设计规范2.1数据库设计2.1.1通用命名约定2.1.2库2.1.3表2.1.4字段名2.1.5字段数据类型优化2.1.6索引设计2.1.7分库分表、分区表
信仰与初衷·2023-11-04 22:52

分库分表的几个常见方面

小傅哥通常分库分表的几个常见方面；访问频率：对于高频访问的数据，可以将其存储在单独的数据库或表中，以提高读写性能。数据大小：对于大量的数据，可以将其拆分到多个表中，以减少单表的数据量，降低存储开销。
@淡 定·2023-11-04 21:59

分库分表路由组件构建方案V1

实现主要以下几部分：数据源的配置和加载数据源的动态切换切点设置以及数据拦截数据的插入涉及的知识点：分库分表相关概念散列算法数据源的切换AOP切面Mybatis拦截器数据源的配置和加载获取多个数据源我们肯定需要在
xbhog·2023-11-04 21:59

ShardingSphere分库分表3-内核原理及核心源码解析

源码环境安装三、ShardingSphere的SPI扩展点1、SPI机制2、ShardingSphere中的SPI扩展点3、实现自定义主键生成策略四、源码大图这一部分，我们主要了解ShardingSphere进行分库分表的底层原理
roykingw·2023-11-04 21:27

路由组件构建方案(分库分表)V1

优质资源分享学习路线指引（点击解锁）知识定位人群定位Python实战微信订餐小程序进阶级本课程是pythonflask+微信小程序的完美结合，从项目搭建到腾讯云部署上线，打造一个全栈订餐系统。Python量化交易实战入门级手把手带你打造一个易扩展、更安全、效率更高的量化交易系统路由组件构建方案V1实现效果：通过注解实现数据分散到不同库不同表的操作。实现主要以下几部分：数据源的配置和加载数据源的动态
虚幻私塾·2023-11-04 21:56

自定义路由组件实现分库分表

自定义路由组件实现分库分表学习总结(个人感悟)DataSourceAutoConfig初始化读取配置文件、加载配置文件数据至内存中并将值保存到bean容器(@Bean)通过重写setEnvironment
indexsunny·2023-11-04 21:55

自定义分库分表组件(实现分库分表的组件)——java

系列文章目录文章目录系列文章目录前言一、所需技术二、技术总结1.ThreadLocal2.HashMap三、实现1、定义路由注解自定义注解格式要求元注解：用于描述注解的注解在程序使用(解析)注解：获取注解中定义的属性值小例子：注解定义一个简单的测试框架实战写法小总结2、解析路由配置3.数据源切换两个注解的作用数据源的创建4.切面拦截案例分析结果5.Mybatis拦截器处理分表最后前言可以先看下上文
依嘫_吃代码·2023-11-04 21:25

MySql详解（七）--分库分表篇

MySQL分库分表篇分库分表介绍使用背景当【表的数量】达到了几百上千张表时，众多的业务模块都访问这个数据库，压力会比较大，考虑对其进行分库。
刘了个牛·2023-11-04 21:54

分库分表中间件

mysql中间件研究，整理互联网上的一些中间件文章mysql-proxy是官方提供的mysql中间件产品可以实现负载平衡，读写分离，failover等，但其不支持大数据量的分库分表且性能较差。
qq_39158142·2023-11-04 21:24

阿里巴巴数据库分库分表的实践

在2006年阿里巴巴B2B团队以开源方式研发了Cobar这一关系型数据的分布式处理系统。该系统在很大程度上解决了最初使用Oracle数据库因为存储数据变得越来越大带来的扩展性问题，并且为开发人员提供了一个使用相对简单的用户体验，在当时Cobar平均每天处理近50亿次的SQL操作。阿里巴巴分布式数据层平台发展和演变业务数据从原来的单库单表模式变成了数据被拆分到多个数据库，甚至多个表中，如果在数据访问
背着代码去游走·2023-11-04 21:19

关于分库分表组件Sharding-JDBC入门与项目实战

因此想借助一些分库分表的中间件，实现自动化分库分表实现。调研下来，发现Sharding-JDBC目前成熟度最高并且应用最广的Java分库分表的客户端组件。
gg7894125·2023-11-04 21:19

分库分表自定义路由组件

1.定义路由注解@Documented@Retention(RetentionPolicy.RUNTIME)//@Target用来表示注解作用范围，超过这个作用范围，编译的时候就会报错。//@Target(ElementType.TYPE)——接口、类、枚举、注解,@Target(ElementType.METHOD)——方法@Target({ElementType.TYPE,ElementTyp
@淡 定·2023-11-04 21:17

MySql运维篇---009：分库分表：垂直拆分、水平拆分、通过MyCat进行分片，读写分离：一主一从、 双主双从

3.分库分表3.1介绍3.1.1问题分析使用单个数据库存储所有的数据，如果磁盘和内存和内存不足了可以增大磁盘和内存，但是对于一台服务器的磁盘和内存不可能无限制的扩张下去，它是受我们服务器的硬件影响的，如果说数据库所存储的数据还在不断增加
清风微凉 aaa·2023-11-04 04:35

MySQL的主从架构搭建

一、MySQL高可用集群介绍1-1、数据库主从架构与分库分表  随着现在互联网的应用越来越大，数据库会频繁的成为整个应用的性能瓶颈。
小满只想睡觉·2023-11-04 01:03

编写shell脚本，利用mysqldump实现MySQL数据库分库分表备份

查看数据和数据表mysql-uroot-p'123456'-e'showdatabases'mysql-uroot-p'123456'-e'showtablesfromcb_d'删除头部Database和数据库自带的表mysql-uroot-p'123456'-e'showdatabases'-N|egrep-v"information_schema|mysql|performance_schem
MorningStar_cao·2023-11-04 00:34

编写shell脚本，利用mysqldump实现mysql数据库分库分表备份

摘要：本文介绍了如何使用Shell脚本和mysqldump工具实现MySQL数据库的分库分表备份。
Fran_klin__·2023-11-04 00:33

SpringBoot+Sharding-JDBC操作分库分表 水平分表

文章来源:https://dabai.hdmll.com/boke/post/31记录下方便有需要的时候用
无来无去_A·2023-11-03 17:21

最佳实践：一对一数据关联

1、有的时候表格很大，只是需要按需取一部分的，连表可能造成锁表；2、需要根据我后面的业务结果来决定是不是要加载一对一；3、在后期分库分表，如果连表查询可能需要大量修改sql语句；以上情况下join似乎就不太适合
铁匠简记·2023-11-03 07:54

MySQL中如何进行分库分表的设计和实现？

分库分表是一种常用的数据库扩展方式，可以提高数据库的并发处理能力和扩展性，下面是分库分表的设计和实现的一般步骤：数据库选择：选择合适的数据库管理系统（DBMS），如MySQL，支持分库分表的功能。
悦目春风·2023-11-02 23:31

mysql 多租户_动态路由数据源（多租户）解决方案

当下有很多服务都使用了多数据源，或是出于跨库查询或是分库分表、读写分离等，多数据源解决方案早已不是稀罕事。
伯特兰·罗卜·2023-11-02 17:06

分库分表分区

分库分表分区数据库分库、分表和分区是水平切分数据库的策略，有助于提高数据库性能、可伸缩性和负载均衡。概念**分库：**将一个库的数据拆分到多个相同的库中，访问的时候访问一个库。
Junfeng Tang·2023-11-02 09:56

Redis快速实战

当访问量上万，数据库压力增大，可以采取的方案有：读写分离，分库分表当访问量达到10万、百万，需要引入缓存。将已经访问过的内容或数据存储起来，当再次访问时先找缓存，缓存命中返回数据。
dingchengyu·2023-11-02 07:08

实战——幂等性+海量数据处理

重复下单解决方案1.3案例一幂等性总结2防止订单ABA问题2.1场景如下：当在修改订单用户信息的时候发生服务器或者网络问题导致的重试2.2ABA问题解决方案2.3业务ABA问题总结二、海量数据处理1.读写分离2.分库分表
甲乙Rocket·2023-11-02 05:24

在数据库分库分表之后，你该如何解决事务问题？

本篇文章是基于非事务消息的异步确保的方式来完成分库分表中的事务问题。二、需要解决问题2.1原有事务由于分库分表之后，新表在另外一个数据库中，如何保证主库和分库的事务性是必须要解决的问题。
风平浪静如码·2023-11-02 03:57

分布式数据库中间件 MyCat | 分库分表实践

可以用作读写分离、分库分表（分片）、容灾备份、多租户应用开发、大数据基础设施，使底层数据架构具备很强的适应
adjkldd·2023-11-01 22:47

sharding-jdbc-spring-boot-starter 整合 mybatis-plus-boot-starter + druid

sharding-jdbc-spring-boot-starter整合mybatis-plus-boot-starter+druidsharding-jdbc整合mybatis-plus+druidshardingsphere分库分表
蕃薯耀·2023-11-01 16:31

【mysql】单表数据量过大解决方案

单表字段数16问题索引膨胀，查询耗时长，影响正常CRUD…方案●分区按日期…范围（不推荐、问题多）●分表水平分表（阿里巴巴《Java开发手册》提出单表行数超过500万行或者单表容量超过2GB，才推荐进行分库分表
宋丹敏·2023-11-01 09:19

技术解析｜Doris Connector 结合 Flink CDC 实现 MySQL 分库分表 Exactly Once精准接入

本篇文档将演示如何使用ApacheDorisFlinkConnector结合FlinkCDC以及DorisStreamLoad的两阶段提交，实现MySQL数据库分库分表实时高效接入，并实现ExactlyOnce
Apache Flink·2023-10-31 20:03

7.MySQL优化(2)

本章要点1.索引生效2.聚簇索引3.分库分表4.高可用方案1.索引生效原则索引生效的情况:匹配最左前缀全值匹配匹配列前缀匹配范围值精确匹配某列并范围匹配另外一列BTree索引的限制:如果不是按照索引的最左列开始查找
农民工进城·2023-10-31 07:41

分库分表

https://mp.weixin.qq.com/s/wFEdLuri0xAUCedIY30YRQ一.数据切分关系型数据库本身比较容易成为系统瓶颈，单机存储容量、连接数、处理能力都有限。当单表的数据量达到1000W或100G以后，由于查询维度较多，即使添加从库、优化索引，做很多操作时性能仍下降严重。此时就要考虑对其进行切分了，切分的目的就在于减少数据库的负担，缩短查询时间。数据库分布式核心内容无非
小羊咩咩_91b7·2023-10-31 06:03

优秀程序员修炼手册,Offer拿不停，JVM+Java并发+Java集合+Spring全家桶+Redis+中间件+分布式+数据库

2、看你上面有接触过消息中间件，负载均衡、RPC框架等技术吗，MySQL分库分表有做过吗？3、分布式架构设计，Redis分布式锁呢？是不是看上去很难，是不
SpringBoot_·2023-10-31 06:42

数据库分库分表，何时分？怎样分？

随着互联网技术的成熟，我们的个人信息都存储在数据库之中，那么对于程序员的我们，对于数据库的优化又是怎样做到的呢?image一、数据切分根据切分类型，可以分为两种方式：垂直（纵向）切分和水平（横向）切分接下来给大家慢慢介绍：1、垂直（纵向）切分image常见有垂直分库和垂直分表两种。垂直分库就是根据业务耦合性，将关联度低的不同表存储在不同的数据库。垂直分表是基于数据库中的“列”进行，某个表字段较多，
_Cappuccino_·2023-10-30 16:14

【Redis】高并发分布式结构服务器

文章目录服务端高并发分布式结构名词基本概念评价指标1.单机架构缺点2.应用数据分离架构应用服务集群架构读写分离/主从分离架构引入缓存-冷热分离架构分库分表（垂直分库）业务拆分⸺微服务总结服务端高并发分布式结构名词基本概念应
芒果再努力·2023-10-30 11:19

分布式数据库的架构演变之路

MyCat是一个数据库分库分表中间件，使用MyCat可以非常方便地实现数据库的分库分表查询，并且减少项目中的业务代码。
鲜人掌·2023-10-30 05:26

转太强了！一文讲透了标准Web系统的架构分层~

一键实现读写分离、分库分表~作者：说好不能打脸来源：https://blog.csdn.net/yinwenjie/article/details/46480485架构体系分层图在上图中我们描述了Web
互联网架构·2023-10-30 05:03

mybatis（五）：mybatis插件

在前面源码分析的过程中，有几次出现过一段代码InterceptorChain.pluginAll()，而这就是使用插件通过动态代理的方式对mybatis进行功能增强，我们平时使用的一些分页插件、分库分表插件等基本都是使用的
一只老实的程序猿·2023-10-29 21:31

数据库分库分表

Mysql进行分区：将超大的数据集打散成多个数据文件（多个ibd文件），这样进行数据查询的时候就可以缩小磁盘扫描范围将表划分为多个不重叠的部分，有三种分区方式：（1）range分区：按照范围进行分区，比如按照时间范围进行分区下表就是2000年出生的一个区，2001年出生的一个区......（2）hash分区：将数据均匀的分布到各个分区上,你可以自己指定模数以及余数是几分到哪个分区（3）list分区
Pr Young·2023-10-29 15:01

Mysql数据库分库分表实践

目前应用系统的最大瓶颈出现在数据库，主要是基于数据库的逻辑存储结构，和磁盘的物理特性决定了随机读取效率低下，无法靠简单磁盘阵列的扩展或者分布式文件系统，来提升性能。数据库的瓶颈不管是IO瓶颈，还是CPU瓶颈，最终都会导致数据库的活跃连接数增加，进而逼近甚至达到数据库可承载活跃连接数的阈值。在业务Service来看就是，可用数据库连接少甚至无连接可用。接下来就可以想象了吧（并发量、吞吐量、崩溃）。I
Wengy.Xu·2023-10-29 15:31

mysql 分库原则_数据库分库分表最佳实践及说明

数据库瓶颈不管是IO瓶颈还是CPU瓶颈，最终都会导致数据库的活跃连接数增加，进而逼近甚至达到数据库可承载的活跃连接数的阈值。在业务service来看，就是可用数据库连接少甚至无连接可用，接下来就可以想象了(并发量、吞吐量、崩溃)。IO瓶颈第一种：磁盘读IO瓶颈，热点数据太多，数据库缓存放不下，每次查询会产生大量的IO，降低查询速度->分库和垂直分表第二种：网络IO瓶颈，请求的数据太多，网络带宽不够
Irisophia Xie·2023-10-29 15:00

高性能数据库集群：分库分表

读写分离分散了数据库读写操作的压力，但没有分散存储压力，当数据量达到千万甚至上亿条的时候，单台数据库服务器的存储能力会成为系统的瓶颈，主要体现在这几个方面：数据量太大，读写的性能会下降，即使有索引，索引也会变得很大，性能同样会下降。数据文件会变得很大，数据库备份和恢复需要耗费很长时间。数据文件越大，极端情况下丢失数据的风险越高（例如，机房火灾导致数据库主备机都发生故障）。基于上述原因，单个数据库服
rs勿忘初心·2023-10-29 15:30

MySQL数据库分库分表

为什么要分库分表关系型数据库本身比较容易成为系统瓶颈，单机存储容量、连接数、处理能力都有限。切分的目的就在于减少数据库的负担，缩短查询时间。
好好ysd·2023-10-29 15:00

数据库分库分表＜====＞分布式事务

什么是分库分表分库分表方案是对关系型数据库数据存储和访问机制的一种补充。
努力学习Java的小白菜·2023-10-29 15:00

数据库分库分表策略

一、背景：系统刚开始的时候，数据库都是单库单表结构。随着业务量的增加进行第一次数据库升级，根据业务垂直拆分数据库，这样多变成多个业务数据库，每个数据库里面还是单表结构。接下来，继续随着业务量的继续增加，单表已经很难承受数据量，就要进行分表，这个时候就是，多个业务库，每个业务库下对需要分表的表进行分表。再接下来，随着应用的增加，数据库IO，磁盘等等都抗不住了，就要把分表的表分到多个库，这样就形成了如
ovejur·2023-10-29 15:29

数据库分库分表概述

数据库的数据量也越来越大，数据慢慢达到GB,TB级别，获取数据的效率越来越慢，简单的数据库分区以及单个数据服务器已经不能满足数据的增长，这个时候我们就需要用到数据库集群了，有了数据库的集群肯定会涉及到数据库的分库分表操作数据库的分库分表操作又统称为数据库分片
玉&心·2023-10-29 15:56

数据库分库分表详细拆解

一、数据库瓶颈不管是IO瓶颈，还是CPU瓶颈，最终都会导致数据库的活跃连接数增加，进而逼近甚至达到数据库可承载活跃连接数的阈值。在业务Service来看就是，可用数据库连接少甚至无连接可用。接下来就可以想象了吧（并发量、吞吐量、崩溃）。1、IO瓶颈第一种：磁盘读IO瓶颈，热点数据太多，数据库缓存放不下，每次查询时会产生大量的IO，降低查询速度->分库和垂直分表。第二种：网络IO瓶颈，请求的数据太多
编程千纸鹤·2023-10-29 15:25

数据库分库分表的原则

目录1、数据库分库分表是什么2、为什么要对数据库分库分表3、何时选择分库分表4、⭐分库分表遵循的原则5、分库分表的方式6、数据存放在表和库中的规则（算法）7、分库分表的架构模式8、分库分表的问题小结1、
林隐w·2023-10-29 15:55

2万字详解Oracle分区表技术，太顶了

不都是分库分表吗？怎么又来个分区？让我们一起，一探究竟，深入理解一下Oracle分区表技术，实现快速入门，丰富个人简历，提高面试level，给自己增加一点谈资，秒变面试小达人，BAT不是梦。
_Kafka_·2023-10-29 12:03

MySQL篇---第五篇

系列文章目录文章目录系列文章目录一、分库分表之后,id主键如何处理？二、说说在MySQL中一条查询SQL是如何执行的？三、索引有什么优缺点？一、分库分表之后,id主键如何处理？
数据大魔王·2023-10-29 10:00

分库分表实战之一叶知秋：图览分库分表外卖订单项目

点击查看专栏目录导读|儒猿技术团队将在“石杉的架构笔记”、“狸猫技术窝”、B站：”儒猿架构“以连载的形式（图文/视频）为读者送出最新制作的“基于ShardingSphere的分库分表实战”（免费）中的部分内容
石杉的架构笔记·2023-10-29 10:07

shell脚本实战案例---数据库的备份

目录1.环境准备2.数据库的分库分表备份2.1分库备份2.2分表备份2.3分库分表备份通过此次shell脚本实战案例，我们将学习和了解到如何利用shell脚本实现数据库的分库分表备份。
星辰在努力·2023-10-29 08:17
上一页 5 6 7 8 9 10 11 12 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他