分库

分库分表 Sharding-JDBC (详解 3/6)

SpringCloud、Nginx高并发核心编程》大厂必备+大厂必备+大厂必备【博客园总入口】入大厂+涨工资必备：高并发【亿级流量IM实战】实战系列【SpringCloudNginx秒杀】实战系列【博客园总入口】目录：分库分表
40岁资深老架构师尼恩·2024-01-31 09:55

面试官：可以聊聊有关数据库的优化吗？

2.追问：能详细说说分库
LuckyWangxs·2024-01-30 22:41

关于分库分表

儒猿购买过一个视频课程：基于ShardingSphere的分库分表实战课（9.9专享）(xiaoe-tech.com)如何演进到分库分表的？
薛薛哦·2024-01-30 21:25

mybatis-plus团队新作：mybatis-mate 轻松搞定数据权限

0、简介mybatis-mate为mp企业级模块，支持分库分表，数据审计、数据敏感词过滤（AC算法），字段加密，字典回写（数据绑定），数据权限，表结构自动生成SQL维护等，旨在更敏捷优雅处理数据。
Fightover·2024-01-30 19:46

《我想进大厂》之分布式事务篇

无论是数据量导致的分库，还是现在微服务盛行的场景都是他出现的原因。这一篇内容还是避免不了俗套，主要的范围无非是XA、2PC、3PC、TCC，再最后到Seata。
艾小仙人·2024-01-30 18:42

分布式场景怎么Join

考虑到我的领域是在处理分库分表或者其他的分区模式，这让我开始不由得联想我们怎么在分布式场景应用这个Join逻辑，对于两个不同库里面的不同表我们是没有办法直接进行Join操作的。
若呓·2024-01-30 18:04

100Wqps短链系统，怎么设计？

这道题，看上去业务简单，其实，覆盖的知识点非常多：高并发、高性能分布式IDRedisBloomFilter高并发、低内存损耗的过滤组件知识分库、分表海量数据存储多级缓存的知识HTTP传输知识二进制、十六进制
程序一逸·2024-01-30 12:32

雪花算法（PHP）

简介现在的服务基本是分布式、微服务形式的，而且大数据量也导致分库分表的产生，对于水平分表就需要保证表中id的全局唯一性。
陈卿诺语·2024-01-30 03:36

数据库分表分库理论

1.数据切分关系型数据库本身比较容易成为系统瓶颈，单机存储容量、连接数、处理能力都有限。当单表的数据量达到1000W或100G以后，由于查询维度较多，即使添加从库、优化索引，做很多操作时性能仍下降严重。此时就要考虑对其进行切分了，切分的目的就在于减少数据库的负担，缩短查询时间。数据库分布式核心内容无非就是数据切分（Sharding），以及切分后对数据的定位、整合。数据切分就是将数据分散存储到多个数
CwSunlit·2024-01-29 15:24

MySQL数据库之分库分表方案

数据库之互联网常用分库分表方案一、数据库瓶颈1、IO瓶颈2、CPU瓶颈二、分库分表1、水平分库2、水平分表3、垂直分库4、垂直分表三、分库分表工具四、分库分表步骤五、分库分表问题1、非partitionkey
java小浩·2024-01-29 15:24

数据库分表分库 小记

什么是分表分库分库分表是指将原本存储在单一数据库中的数据，拆分到多个数据库或者多个数据表中，通过这样的方式来提高数据库的性能。
annolim·2024-01-29 15:53

深入理解MySQL——分库分表种类与原则

分库分表的种类首先说明，这里所说的分库分表是指把数据库中数据物理地拆分到多个实例或多台机器上去，而不是MySQL原生的Partitioning。
三月微风·2024-01-29 15:52

数据库分表分库的原则

什么是数据库分库分表数据库分表（TableSharding）数据库分表是将一个大表按照某种规则拆分成多个小表存储在不同的物理表中的技术。
Homeless Knight·2024-01-29 15:52

ShardingSphere之ShardingJDBC客户端分库分表下

目录ShardingJDBC实战STANDARD标准分片策略COMPLEX_INLINE复杂分片策略CLASS_BASED自定义分片策略HINT_INLINE强制分片策略ShardingJDBC实战上篇已经将需要用到的类、数据库表都准备好了，本篇主要介绍分片配置文件。STANDARD标准分片策略如果按照上篇文章所讲，使用INLINE分片算法是不能支持Between查找的，如果使用会报错。@Test
山鸟与鱼！·2024-01-29 12:56

ShardingSphere之ShardingJDBC客户端分库分表上

客户端分库分表与服务端分库分表ShardingJDBC客户端分库分表ShardingProxy服务端分库分表ShardingSphere实现分库分表的核心概念ShardingJDBC实战什么是ShardingSphere
山鸟与鱼！·2024-01-29 12:55

SpringBoot+ShardinggJDBC（5.2.0）实现分库分表

前言本文提供了在SpringBoot环境下使用ShardingJDBC，可以参考ShardingJDBC的使用手册我们其实都在使用垂直分库和垂直分表，垂直分库就是我们微服务中每个微服务都有自己的库，一般就是根据业务来拆分库
fortune_often_in·2024-01-29 07:20

【滴滴】Java开发工程师(J240118002)

熟悉互联网常用技术和中间件：分库分表技术、
探小虎·2024-01-29 00:49

[小白]FFMPEG小白-day03

读完本文章大概需要5分钟基于FFMPEG+SDL的视频播放器制作FFMPEG库简介FFMPEG一共包含8个库*avcodec:编解码（最重要的库）*avformat:封装格式处理*avutil:工具库（大部分库都需要这个库的支持
Caiaolun·2024-01-28 19:38

MySQL架构演进-从主从复制到分库分表

背景业务飞速发展导致数据规模急速膨胀，单机的数据库已经无法满足互联网业务的发展。传统的将数据集中存储单一数据结节的方案，在容量、性能、可用性和可维护性方面已经难以满足互联网海量数据的场景。从容量方面考虑，单机数据库容量有限，难以扩容。从性能方面来说，由于关系型数据库大多数采用B+树类型索引，在数据量超过一定的阈值后，索引的深度增加导致对磁盘的随机IO次数增加，进而导致性能问题。从可用性方面来说，服
架构文摘·2024-01-28 11:50

聊聊MySQL架构演进：从主从复制到分库分表

背景业务飞速发展导致数据规模急速膨胀，单机的数据库已经无法满足互联网业务的发展。传统的将数据集中存储单一数据结节的方案，在容量、性能、可用性和可维护性方面已经难以满足互联网海量数据的场景。从容量方面考虑，单机数据库容量有限，难以扩容。从性能方面来说，由于关系型数据库大多数采用B+树类型索引，在数据量超过一定的阈值后，索引的深度增加导致对磁盘的随机IO次数增加，进而导致性能问题。从可用性方面来说，服
写代码的珏秒秒·2024-01-28 11:18

分库分表：如何实现高可扩展性架构

1.背景介绍分库分表是一种高性能数据库设计方法，它可以帮助我们实现高可扩展性架构。在现代互联网应用中，数据量越来越大，传统的数据库设计已经无法满足业务需求。因此，分库分表技术成为了一种必须掌握的技能。
OpenChat·2024-01-28 11:17

彻底搞清分库分表（垂直分库，垂直分表，水平分库，水平分表）

分库分表是什么下边以电商系统中的例子来说明，下图是电商系统卖家模块的表结构：在这里插入图片描述通过以下SQL能够获取到商品相关的店铺信息、地理区域信息：SELECTp.*,r.[地理区域名称],s.
美雨知春·2024-01-27 15:44

分库分表与分布式数据库技术选项分析

最近经常被问到分库分表与分布式数据库如何选择，网上也有很多关于中间件+传统关系数据库（分库分表）与NewSQL分布式数据库的文章，但有些观点与判断是我觉得是偏激的，脱离环境去评价方案好坏其实有失公允。
zl1zl2zl3·2024-01-27 07:04

基于本地缓存制作一个分库分表的分布式ID生成器

背景介绍项目整体架构是基于springboot3.0开发rpc调用采用dubbo注册配置中心使用nacos采用sharding-jdbc来实现分库分表。基于以上情况我想生成分布式id。
忧郁的双鱼座程序猿·2024-01-27 07:20

4 垂直分库

image.pngimage.pngimage.png主从复制备份数据库image.png拷贝备份数据库到其他的三台服务器image.png导入三个数据库image.png主从复制主从复制分担的是读负载，而垂直分库和水平分库分担是写负载添加过滤链路
浅川好孩子·2024-01-27 05:32

来聊聊大厂常用的分布式ID生成方案

写在文章开头随着数据日益增加，项目需要进行分库分表来分摊压力，为了保证数据ID唯一，必须有一套适配当前分库分表的分布式ID生成方案，而这套方案必须具备以下条件：全局唯一：分布式ID必须全局唯一，确保数据可以被唯一确定
shark-chili·2024-01-27 03:35

MySQL数据库设计规范

目录规范背景与目的设计规范2.1数据库设计2.1.1库名2.1.2表结构2.1.3列数据类型优化2.1.4索引设计2.1.5分库分表、分区表2.1.6字符集2.1.7程序DAO层设计建议2.1.8一个规范的建表语句示例
小强聊it·2024-01-26 23:17

大厂咋做多系统数据同步方案的？

当前互联网业务系统大多MySQL数据存储与处理方案：随信息时代爆炸，大数据量场景下慢慢凸显短板，如：需对大量数据全文检索，对大量数据组合查询，分库分表后的数据聚合查询自然想到如何使用其他更适合处理该类问题的数据组件
JavaEdge.·2024-01-26 21:59

Apache ShardingSphere分表的简单使用和常见问题

分库分表的背景使用pom配置1，application.properties配置文件2，创建配置类分表验证分表常见问题自定义分表规则未生效使用sum函数无法获取值合并或共用数据源问题简介官网：ApacheShardingSphere
瑶山·2024-01-26 12:58

TIDB7.5LTS集群安装配置手册

简介因近期有一个项目需要上线，在评估使用什么架构时，和开发同仁沟通需求，了解到该应用为OLTP但是数据量很集中，会有几张超大的表，如果要保证事务效率，使用mysql集群难免会要做分库分表，对后期的运维带来很大的挑战
xiaofan23z·2024-01-26 11:02

水平分库分表的关键问题及解决思路

在之前的文章中，我介绍了分库分表的几种表现形式和玩法，也重点介绍了垂直分库所带来的问题和解决方法。本篇中，我们将聊聊水平分库分表的一些技巧。
程序员BUG·2024-01-26 11:08

Django从入门到精通（三）

目录七、ORM操作7.1、表结构常见字段参数示例7.2、表关系一对多多对多第一种方式第二种方式7.3、连接MYSQL7.4、数据库连接池7.5、多数据库读写分离分库（多个app->多数据库）分库（单app
编程抗氧化·2024-01-26 09:48

skywalking监控mysql_基于SkyWalking的分布式跟踪系统 - 微服务监控

上一篇文章我们搭建了基于SkyWalking分布式跟踪环境，今天聊聊使用SkyWalking监控我们的微服务(DUBBO)服务案例假设你有个订单微服务，包含以下组件MySQL数据库分表分库(2台)生产者
weixin_39524247·2024-01-26 07:17

mysql高可用设计，主库挂了怎么办

mysql分库分表不同服务器能提供的查询服务是不一样的，因为存的东西不一样。数据库的高可用设计是比较难的，其实最重要的就是冗余。主
結城·2024-01-26 06:07

MySQL笔记（分库分表）

摘自https://zhuanlan.zhihu.com/p/50650224参考https://tech.meituan.com/2016/11/18/dianping-order-db-sharding.htmlhttps://crossoverjie.top/2019/07/24/framework-design/sharding-db-03/https://zhuanlan.zhihu.c
圆方的鱼·2024-01-26 00:33

数据库分表分库的原则

分表分库是一种数据库水平切分的策略，用于处理大规模数据和提高数据库性能、可伸缩性、和容量。这种技术通过将数据分散存储在多个数据库实例和表中，从而分担数据库服务器的负荷，降低了单一数据库的压力。
&北笙&·2024-01-25 20:27

智能互联网之总体架构设计篇

1.单体架构设计和实践1.缺点系统耦合性高技术选型单一开发效率低下2.破局数据库存储量拆分：垂直拆分--分库水平拆分-分表2.架构同理：垂直方向拆分-业务维度水平方向拆分-功能维度2.水平分层架构设计与实践
南园故剑00·2024-01-25 17:14

Springboot，使用sharedingjdbc 分库分表，最佳实践。

一、简介ApacheShardingSphere是一套开源的分布式数据库解决方案组成的生态圈，它由JDBC、Proxy和Sidecar（规划中）这3款既能够独立部署，又支持混合部署配合使用的产品组成。它们均提供标准化的数据水平扩展、分布式事务和分布式治理等功能，可适用于如Java同构、异构语言、云原生等各种多样化的应用场景。ApacheShardingSphere5.x版本开始致力于可插拔架构，项
可乐cc呀·2024-01-25 17:56

分布式架构知识体系整理

2.关键词节点，时间，一致性，CAP，ACID，BASE，P2P，机器伸缩，网络变更，负载均衡，限流，鉴权，服务发现，服务编排，降级，熔断，幂等，分库分表，分片分区，自动运维，容错处理，全栈监控，故障恢复
weixin_34304013·2024-01-25 16:00

数据库分库分表，何时分？怎样分？

一.数据切分关系型数据库本身比较容易成为系统瓶颈，单机存储容量、连接数、处理能力都有限。当单表的数据量达到1000W或100G以后，由于查询维度较多，即使添加从库、优化索引，做很多操作时性能仍下降严重。此时就要考虑对其进行切分了，切分的目的就在于减少数据库的负担，缩短查询时间。数据库分布式核心内容无非就是数据切分（Sharding），以及切分后对数据的定位、整合。数据切分就是将数据分散存储到多个数
烟雨木子·2024-01-25 15:28

写一个水平分表插件

我们只考虑以Mybatis插件的方式写一个水平分表插件，不包含分库，所以不需要考虑代理数据源等问题。
yzp-·2024-01-25 06:43

MySQL基于多实例构建主从复制及常见故障排查

文章目录主从复制介绍搭建主从复制的前提主从复制工作过程主从复制的作用主从复制搭建构建MySQL多实例主从复制故障主从延时监控主要原因主从复制对事物的影响分库分表面临的问题主从复制介绍主从复制基于binlog
玫瑰花的葬礼。·2024-01-25 05:59

架构篇14：高性能数据库集群-读写分离

文章目录读写分离原理复制延迟分配机制小结高性能数据库集群的第一种方式是“读写分离”，其本质是将访问压力分散到集群中的多个节点，但是没有分散存储压力；第二种方式是“分库分表”，既可以分散访问压力，又可以分散存储压力
星猿杂谈·2024-01-24 22:05

分库分表之sharingjdbc

分库分表的技术有哪些分库分表是一种常用的数据库水平扩展技术，用于处理大规模数据存储和负载均衡。
你曾经是少年·2024-01-24 21:31

MySQL集群架构（三）：分库分表

分库分表前言拆分方式垂直拆分垂直拆分优点垂直拆分缺点水平拆分水平拆分优点水平拆分缺点主键策略UUIDCOMB（UUID变种）SNOWFLAKE数据库ID表Redis生成ID分片分片概念分片策略基于范围分片哈希取模分片一致性哈希分片扩容方案停机扩容平滑扩容总结前言之前介绍了
一白丁·2024-01-24 18:09

分布式专题-数据库分库分表之Mycat01-数据库性能优化方案

目录导航前言为什么要分库分表数据库性能瓶颈主要原因数据性能优化方案SQL与索引表与存储引擎架构配置操作系统与硬件架构演进与分库分表单应用单数据库多应用单数据库多应用独立数据库什么时候分表？
✎ℳ๓₯㎕...雲淡風輕·2024-01-24 18:08

高性能数据库集群-读写分离和分库分表

声明：学习完李运华《从0开始学架构》，有一种醍醐灌顶，豁然开朗的感觉。为了能够对其概念有一个深入的理解，并且掌握其总结的方法论。特意对本课程做一个提炼，形成自己的知识体系。毕竟能给别人讲清楚了，才能说明自己真的掌握了。本文的引用仅限自我学习如有侵权，请联系作者删除。读写分离的应用场景是什么？读写分离适用单机并发无法支撑并且读的请求更多的情形。在单机数据库情况下，表上加索引一般对查询有优化作用却影响
快乐的一只程序猿·2024-01-24 18:08

性能优化之数据库篇5-分库分表与数据迁移

一、数据库拆分夏菡小说网https://www.2912.info1.为什么要做数据库拆分单机数据库存在的问题？从容量、性能、可用性和运维成本上难以满足海量数据的场景。性能方面，数据量超过一定阈值，B+树索引慎独增加导致磁盘访问的IO次数增加，进而导致查询性能的下降。容量方面，单机能存储的数据量有限可用性方面，大量的查询落到单一的数据库节点或者简单的主从架构上，数据库很难承担。运维方面，数据量达到
Leonardo●da●Vinci·2024-01-24 18:07

浅谈高性能数据库集群 —— 分库分表

点击上方“芋道源码”，选择“置顶公众号”技术文章第一时间送达！源码精品专栏精尽Dubbo原理与源码69篇精尽Netty原理与源码61篇中文详细注释的开源项目Java并发源码合集RocketMQ源码合集Sharding-JDBC源码解析合集SpringMVC和Security源码合集MyCAT源码解析合集来源:https://www.jianshu.com/p/9eadfba9cdaf最近学习了阿里
芋道源码·2024-01-24 18:35

分布式数据库架构--分库、分表、排序、分页、分组、实现

MySQL分库分表总结：单库单表：单库单表是最常见的数据库设计，例如，有一张用户(user)表放在数据库db中，所有的用户都可以在db库中的user表中查到。
Lionel_Medoo·2024-01-24 18:35
上一页 1 2 3 4 5 6 7 8 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他