分库分表.

史上最全数据库中间件详解

导读：本文详细介绍了中间件，主要从数据库拆分过程及挑战、主流数据库中间件设计方案、读写分离核心要点、分库分表核心要点展开说明。1.数据库拆分过程及挑战垂直拆分、读写分离、分库分表(水平拆分)。
数据和云·2023-10-29 08:24

基于电商业务中台最佳实践：总体架构介绍与交易业务中台核心设计

天然的分库分表，消息解耦和分布式缓存设计，支持弹性扩容，以支持大数据高并发场景。系统逻辑架构图：接下来将分别介绍每个部分。电商中台:中台部分在逻辑上分
ITFLY8·2023-10-29 06:26

浅谈分布式系统

文章目录分布式系统应用数据分离架构应用服务集群架构读写分离/主从分离架构引入缓存--冷热分离架构数据库分库分表存储集群微服务架构小结分布式系统只有一台服务器负责所有的工作称为单机架构，但是一台主机的硬件资源是有上限的
CHJBL·2023-10-28 23:24

sharding jdbc + mybatis +spring boot的分库分表实现

1.我们先建立数据库和表(分别建了两个库两张表)：CREATEDATABASE`user_0`/*!40100DEFAULTCHARACTERSETutf8*/;CREATETABLE`user_info_1`(`user_id`bigint(19)NOTNULL,`user_name`varchar(45)DEFAULTNULL,`account`varchar(45)NOTNULL,`pass
带着二娃去遛弯·2023-10-28 19:54

分布式唯一 ID

单表情况下我们可以直接使用数据库的自增id，但是分库分表后就无法满足需求了，需要想办法通过其他手段来实现。
GeorgeMR·2023-10-28 07:09

.Net/C#分库分表高性能O(1)瀑布流分页

框架介绍依照惯例首先介绍本期主角:ShardingCore一款ef-core下高性能、轻量级针对分表分库读写分离的解决方案，具有零依赖、零学习成本、零业务代码入侵dotnet下唯一一款全自动分表,多字段分表框架,拥有高性能,零依赖、零学习成本、零业务代码入侵,并且支持读写分离动态分表分库,同一种路由可以完全自定义的新星组件框架你的star和点赞是我坚持下去的最大动力,一起为.net生态提供更好的解
dotNET跨平台·2023-10-28 05:39

基于Dapper的开源LINQ扩展,且支持分库分表自动生成实体

LnskyDB是基于Dapper的LINQ扩展,支持按时间分库分表,也可以自定义分库分表方法.而且可以T4生成实体类免去手写实体类的烦恼.文档地址:https://liningit.github.io/
随风忘记·2023-10-28 05:02

9-MySQL提高数据管理效率（分库分表实践）

MySQL提高数据管理效率（分库分表实践）在当今的互联网时代，随着业务规模的不断扩大，数据量也呈现出爆炸性的增长。
信息化战略·2023-10-28 04:27

Springboot整合ShardingSphere实现分库分表

一、ShardingJDBC简介1.什么是ShardingJDBCShardingSphere是一套开源的分布式数据库中间件解决方案组成的生态圈，它由Sharding-JDBC、Sharding-Proxy和Sharding-Sidecar（计划中）这3款相互独立的产品组成,我们只关注Sharding-JDBC即可.官方地址：https://shardingsphere.apache.org/do
Love is beautiful·2023-10-26 00:10

聊聊主流的分布式数据库

我们可以借助分库分表中间件，比如mycat、shardingjdbc来实现分库分表，缓解单库的读写性能。
AAA小肥杨·2023-10-25 21:33

分库分表之第一篇

@TOC1.概述1.1.分库分表是什么小明是一家初创电商平台的开发人员，他负责卖家模块的功能开发，其中涉及了店铺、商品的相关业务，设计如下数据库：在这里插入图片描述通过以下SQL能够获取到商品相关的店铺信息
小小一技术驿站·2023-10-25 16:46

redis笔记

文章目录Nosql概述为什么要用Nosql1、单机Mysql的年代2、Memcached(缓存)+Mysql+垂直拆分3、分库分表+水平分表+MYSQL集群4、如今年代什么是NoSQLNoSQL=NotOnlySQL
夏来梦栀子·2023-10-25 15:49

Sharding Sphere 4.x分库分表解决方案

一、基本概念http://shardingsphere.apache.org/index_zh.html【写于2021-0325】逻辑表：水平拆分的数据库（表）的相同逻辑和数据结构表的总称。例：订单数据根据主键尾数拆分为10张表，分别是t_order_0到t_order_9，他们的逻辑表名为t_order。真实表：在分片的数据库中真实存在的物理表。即上个示例中的t_order_0到t_order_
十点半的毛毛雨·2023-10-25 07:13

分库分表-ShardingSphere 4.x（1）

文章目录分库分表-ShardingSphere4.x（1）ShardingSphere概述Sharding-JDBC实战教程（上）Sharding-JDBC分库分表（⭐）必备环境（数据库和Spr
摸鱼打酱油·2023-10-25 07:07

shardingsphere5.x整合springboot分库分表实战

官方文档不同版本配置变更记录：SpringBootStart配置::ShardingSpherepom.xml配置：org.apache.shardingsphereshardingsphere-jdbc-core-spring-boot-starter5.1.1com.baomidoumybatis-plus-boot-starter3.4.0建表sql：CREATETABLE`orders_0
任人人人呢·2023-10-25 07:55

ShardingSphere分库分表6-5.x新版本特性

文章目录一、整体理解新版本二、5.X部分新特性1、DistSQL2、可插拔内核3、数据迁移三、全部内容总结一、整体理解新版本ShardingSphere在2021年十月份推出了5.0的第一个发布版本，并在2022年一月份推出了5.1版本。从整体来看，ShardingSphere5.x将自己的功能定位从数据库中间件升级到了DataBasePlus，数据库功能增强。核心产品定位的变化，必然会带来非常多
roykingw·2023-10-25 07:23

分库分表 - ShardingSphere

1总述Mycat和ShardingSphere（包括Sharding-JDBC、Sharding-Proxy和Sharding-Sidecar3款产品）都是非常流行的开源分布式数据库中间件，各自具有一些独特的功能，也有很多企业成功应用的案例。通过个人比较这两者的官方文档、社区活跃度等信息，目前ApacheShardingSphere体系更加完善，社区更加活跃。这两者都是国人开源产品中的佼佼者，希望
不努力谁会可怜你？·2023-10-25 07:52

分库分表-ShardingSphere-ShardingJDBC

分片和分区的区别Sharding分片Partition分区存储依赖可跨越DB可跨越物理机器可跨越表空间，不能跨DB存储数据划分常见为时间、范围、面向服务等范围、Hash、列表、混合分区等存储方式分布式集中式扩展性ScaleOut(水平扩展)ScaleUp（垂直扩展）可用性无单点存在单点（DB本身）价格低廉适中（DAS）甚至昂贵（SAN）应用场景Web2.0网站多数传统应用ShardingSpher
金陵砍柴人·2023-10-25 07:52

基于springboot的ShardingSphere5.X的分库分表的解决方案之分表解决方案（一)

基于springboot的ShardingSphere5.X的分库分表的解决方案之分表解决方案(一)假定我们现在已经使用springboot编写了一套系统，随着我们的系统的不断使用，其中某些表的数据量已经突破了单表千万的数据量
ROOT_UNCLE·2023-10-25 07:22

分库分表-ShardingSphere 4.x（2）

文章目录分库分表-ShardingSphere4.x（2）ShardingSphere概述Sharding-JDBC实战教程（下）Sharding-JDBC广播表Config实体类ConfigM
摸鱼打酱油·2023-10-25 07:17

分布式ID系统设计(1)

然后在数据库分库分表之后也需要一个唯一id来表示。基于DB的自增就肯定不能满足了。这个时候能够生成一个Global的唯一ID的服务就很有必要我们姑且把它叫做id-server。
Aaron-chencl·2023-10-24 19:56

三 ShardingSphere分库分表实战

1概念逻辑表：逻辑意义上统一的表真实表：数据库中真正存在的表数据节点：数据分片的最小单元。由数据库、数据源组成分片键：用于分片的数据库字段。需要有足够的分辨度分片算法：用于分片的算法，支持=、between、in分片策略：分片键+分片算法。在ShardingJDBC中一般采用基于Groovy表达式的inline分片策略，如user_$->{user_id%8}，通过模8算法拆成8张表，user_0
刺豚灬·2023-10-23 12:25

11 | NoSQL：在高并发场景下，数据库和NoSQL如何做到互补？

之前学习的读写分离和分库分表就是从这两方面出发，改造传统的关系型数据库的，但是仍有一些问题无法解决。比如，在微博项目中，关系的数据量大到
浥羽醉悠扬·2023-10-23 12:23

java开发微信公众号图片上传功能，不吃透都对不起自己

分库分表场景当我们的数据量大了之后，我们可能会部署很多独立的数据库，但是你
jixuczy·2023-10-22 18:33

数据库

怎么玩分库分表？如何把系统不停机迁移到分库分表的？如何设计可以动态扩容缩容的分库分表方案？分库分表后全局id生成？mysql读写分离的原理，主从同步延时咋解决？
Z_acad·2023-10-22 13:33

系统调优几个维度考虑

更新需要刷新缓存后端：1、jvm调优，需要对jvm参数调优，减少gc，和STW次数；选择合适的垃圾回收器2、使用redis缓存，减少db压力；数据一致性，雪崩、击穿、穿透3、数据库定位慢sql索引优化、最左匹配原则、分库分表
牛八里昂·2023-10-22 05:32

多表连接查询和多次单表查询抉择

在很多大的公司里面，都会禁用多表连接查询，原因就是一旦数据量足够大的时候多表连接查询效率会很慢，而且不利于分库分表的查询优化。那么看一下下面这个例子。
牛八里昂·2023-10-22 05:02

分库分表

分库分表，也就是shardingcolumn的选取，可以选择一个sharingcolumn进行分库分表，也可以选择多个sharingcolumn进行分库分表。
biubiudog·2023-10-22 05:40

MySQL的分库分表

MySQL的分库分表概述简单的来说分库分表就是通过某种特定的条件，将存放在同一数据库中的数据分散在多个数据库中，从而实现分散单台服务器负载的效果。
RwatitFahsa·2023-10-21 22:48

数据库中间MyCat最新硬核教程，主从复制，分库分表

1.Mycat概述如今随着互联网的发展，数据的量级也是成指数的增长，从GB到TB到PB。对数据的各种操作也是愈加的困难，传统的关系性数据库已经无法满足快速查询与插入数据的需求。这个时候NoSQL的出现暂时解决了这一危机。它通过降低数据的安全性，减少对事务的支持，减少对复杂查询的支持，来获取性能上的提升。但是，在有些场合NoSQL一些折衷是无法满足使用场景的，就比如有些使用场景是绝对要有事务与安全指
小熊学Java·2023-10-21 19:54

Mysql 中的性能调优方法

表结构和索引的优化表结构和索引的优化，主要可以下面这些方面去优化：分库分表、读写分离、为字段选择合适的数据类型、适当的反范式设计，适当冗余设计、为查询操作创建必要的索引但是要避免索引滥用、尽可能使用NotNull
无语堵上西楼·2023-10-21 00:32

深入探索Sharding JDBC：分库分表的利器

为了解决这一问题，分库分表成为了一个非常流行的方案。分库分表主流的技术包括MyCat和ShardingJDBC。
冲浪中台·2023-10-20 19:48

Redis随笔

发展过程：优化数据结构和索引->文件缓存（IO）->Memcached（当时最热门技术）3、分库分表+水平拆分+Mysq
Danny.丹·2023-10-20 16:46

04、MySQL-------MyCat实现分库分表

目录九、MyCat实现分库分表1、分库分表介绍：横向（水平）拆分**垂直分表**：水平分表：**分库分表**纵向（垂直）拆分分表字段选择2、分库分表操作：1、分析图：2、克隆主从3、配置MyCat修改配置文件
JH&&HANDSOME·2023-10-20 16:12

es学习笔记

elasticsearch前，我们的数据一般都存储在mysql上，所有的检索都是直接在数据库的查询，当数据库的数据量达到一定量时，数据库的检索效率就会很低，对此我们或许会有很多解决方案，比如对数据库采用分库分表
递归宇宙·2023-10-19 19:29

分布式数据库中间件Mycat

Mycat可以屏蔽分库分表的影响，像操作整表整库一样操作分散的库和表。
风铃峰顶·2023-10-19 10:24

Mycat分库分表概念

Mycat是一个高性能的数据库分库分表中间件，它可以轻松地实现数据库的水平分片。在MyCat中，分表是将一个大表分成多个小表存储的一种方式，每个小表只存储部分数据，实现对大表的分区。
雾漫江北·2023-10-19 09:12

Mac上重置MySQL用户的密码

最近在研究mysql分库分表的分布式架构，启动了自己mac笔记本上的mysql数据库，但是由于安装时间太长，密码忘记了，于是通过百度找到了重置mysql用户密码的方法。
曾经不努力的人·2023-10-19 00:16

MySQL中如何进行分库分表的设计和实现？

分库分表是一种常用的数据库扩展方式，可以提高数据库的并发处理能力和扩展性，下面是分库分表的设计和实现的一般步骤：数据库选择：选择合适的数据库管理系统（DBMS），如MySQL，支持分库分表的功能。
玥沐春风·2023-10-18 22:15

sahrding-jdbc的雪花算法取模为0或1的问题

工作时无意间发现sahrding-jdbc使用雪花算法生成的id在某一业务分库分表永远在那两个库表里面,排查后这里做下分享环境、配置、问题介绍16库16表使用的是org.apache.shardingsphere.core.strategy.keygen
渣渣港·2023-10-18 21:12

Sharding JDBC如何分库分表？看完你就会了

ShardingJDBC的操作分为配置使用、读写分离、分库分表以及应用等，今天我们主要来了解一下关于分库分表的操作，如果你对此感兴趣的话，那我们就开始吧。
我是IT界小白·2023-10-18 20:09

美团Leaf使用

如在美团点评的金融、支付、餐饮、酒店、猫眼电影等产品的系统中，数据日渐增长，对数据分库分表后需要有一个唯一ID来标识一条数据或消息，数据库的自增ID显然不能满足需求；特别一点的如订单、骑手、优惠券也都需要有唯一
秃狼·2023-10-18 15:39

ShardingSphere-Proxy 5.2版本安装试用--保姆级教程

一般情况下，java项目试用Sharding-jdbc做分库分表，但是开发过程中需要查看数据，分表后很不方便，所以建议采用部署一个proxy来用于开发过程中的数据查询使用，说实话没用过proxy作为项目主要的代理去访问数据
雨读千年·2023-10-18 04:26

如何把系统升级为分表分库

停机迁移方案系统停机，没有流量写入，此时老的单库单表数据库静止，然后用写好的导数程序跑起来，写入分库分表里去。
喧嚣城外·2023-10-18 02:03

【性能测试】MySQL数据库性能测试

文章目录一、数据库性能测试概述1.1数据库性能测试的目的1.2数据库的性能测试范围二、数据库架构2.1数据库常用架构1.一主多从2.双机热备3.主从同步工作原理2.2数据库分库分表的设计方法拆分原因分库分表方案三
寻小莫·2023-10-18 00:31

MySql篇

、索引创建的原则有哪些八、什么情况下索引会失效九、谈一谈你对SQL优化的经验十、事务的特性十一、并发事务问题、隔离级别十二、undolog和redolog十三、解释一下mvcc十四、主从同步原理十五、分库分表
月星过亿·2023-10-17 19:14

太强了！三种方案优化 2000w 数据大表！

查询变慢的问题方案一：数据表分区方案二：数据库分表水平分表垂直分表1.取模方案：2.range范围方案3.hash取模和range方案结合分区分表的区别：1、实现方式上2、提高性能上3、实现的难易度上分区分表的联系分库分表存在的问题
这我可不懂·2023-10-17 17:57

springCloud-day06

①：跨数据源：分库分表的不同微服务模块（各自的数据库）②：跨服务：不同微服务模块（因为有可能不同模块用同一个数据库，因为spring
韩小志·2023-10-17 09:59

mysql 分库分表，真的能支持服务无限扩容？

刚开始工作的菜鸟，总会有各种疑问，刚开始是对JDKAPI的疑问，对NIO的疑问，对JVM的疑问，当工作几年后，对服务的可用性，可扩展性也有了新的疑问，什么疑问呢？其实是老生常谈的话题：服务的扩容问题。正常情况下的服务演化之路让我们从最初开始。1、单体应用每个创业公司基本都是从类似SSM和SSH这种架构起来的，没什么好讲的，基本每个程序员都经历过。2、RPC应用当业务越来越大，我们需要对服务进行水平
萧风涩涩吹·2023-10-16 23:32

2018-01-25第5章 数据拆分实现数据库能力线性扩展

数据库分库分表的实践分布式数据层框架TDDL，针对分库分表场景，提供了对各种业务场景的支持更加
宇文vss·2023-10-16 18:30
上一页 6 7 8 9 10 11 12 13 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他