分库分表.

小公司里用SpringBoot做MySQL分库分表，踩了一些坑！

往期热门文章：1、没有几十年功力，写不出这一行“看似无用”的代码！！2、为什么Spring和IDEA都不推荐使用@Autowired注解3、从阿里跳槽来的工程师，写个Controller都这么优雅！4、trycatch真的会影响性能？居然被骗了好几年...5、学会这10种定时任务，我有点飘了文章来源：https://juejin.cn/post/71182156822059417961、MySQL
Java后端技术·2023-01-10 11:17

ShardingSphere分库分表schema名称导致NPE问题排查记录

问题现象数据库做了分库分表，在需要查询多表数据进行merge的时候发生了一个NPE的异常。
·2023-01-10 10:07

MySQL调优-高性能业务表结构设计

反范式设计-商品信息范式化和反范式总结实际工作中的反范式实现性能提升-缓存和汇总性能提升-计数器表反范式设计-分库分表中的查询前言记录：产品上线之前，建议遵守范式化。
etcEriksen·2023-01-10 07:45

SpringBoot + Redis：模拟 30w 人的秒杀抢单！

双十一就是一个经典的秒杀案例，动辄数十万笔的交易请求，对于我们来说，核心的两个问题：1-高并发读取与写入（涉及到集群，负载，读写分离，分库分表等操作）2-性能优化（玩转降级、限流、拒绝服务这三件法宝）程序员们应该都知道这样一句话
公众号-老炮说Java·2023-01-07 12:26

MYSQL主键策略（自增，UUid，雪花算法）

自增的优点：1.存储空间小2.插入和查询性能高自增的缺点：1.int的范围可能不够大（但我觉得等数据到上亿级别，大部分情况下都要做分库分表了吧…）2.当要做数据迁移的时候，会很麻烦，主键容易冲突3.id
yyjzzzzz·2023-01-05 11:25

Mysql主键问题:类型问题int、bigint,主键选择问题：auto_increment自增、UUID、雪花算法构造全局自增id

1.主键自增类型问题：int、bigint：有符号int最大约22亿，远大于一般业务需求了和MySQL单表所能支持的性能上限，其实主键达到20多亿时应该去考虑分库分表了，如果要加大预留量，可以把主键改为改为无符号
沙糖橘·2023-01-05 10:21

MySQL 数据表主键设计，选择自增 id 还是 UUID 还是雪花 id？

随着现在许多项目都涉及到了分布式或者微服务，后续或多或少都会针对具体的服务需求对数据库进行拆分（分库分表），这里就会产生一个问题，拆分后的id该如何妥善处理？
米斯特胖墩·2023-01-05 10:17

MySQL的主键 自增 or UUID or 雪花

1.ID的要求在分布式系统中，需要对大量的数据进行唯一标识，有时会对数据采用分库分表，所以我们需要一个全局id主键id的需要保证的一些要求全局唯一不能出现重复的id，这是最基本的要求。
mundo.wang·2023-01-05 10:12

如何构建企业内的 TiDB 自运维体系

为了应对这些问题，我们采取了诸多措施如单库按业务逻辑拆分成多个库的垂直拆分，分库分表
·2023-01-04 18:07

分库分表必知

概述为啥要进行分库分表？
johnny233·2022-12-31 07:33

使用 SpringBoot+JPA多数据源，动态数据源以及分库分表的实现

SpringBoot+JPA多数据源，动态数据源以及分库分表的实现前言：本来想使用sharding-jdbc来实现这个，但是又不想不太熟悉新的框架而存在太多的坑而导致出现无法预测的问题或者及时的解决问题
君悅黎心·2022-12-30 17:01

MySql 分库分表问题

一、MySql为什么要分库分表1、分库分表：主要是当前库的承载能力满足不了日益增加的业务需求，每天都会产生大量的数据，导致对数据操作出现瓶颈。
孤独的背影·2022-12-30 11:22

mpp数据库和mysql数据库的语法区别_有人能说清分库分表、MPP和分布式数据库的区别吗？...

1)分库分表做法，主要是因为早期单机数据库(主要还是MySQL这种低成本场景)下无法在一个库一张表来承载同一业务表下所有的数据，因而将数据划分到不同的物理库表中去，从业务视角来形成一个大的逻辑表。
聂小帅·2022-12-30 10:46

分库分表系列：分库分表的前世今生

这是分库分表系列的第一篇文章，这个系列会给大家分享很多在实际工作中有用的经验，如果有收获，还请分享给更多的朋友。其实这个系列有录过视频给大家学习，但很多读者反馈说看视频太慢了。
jiagoubaiduren·2022-12-30 10:41

分库分表，可能真的会退出历史舞台了？

单表太大，比如超过500w，查询就非常吃力单库太大，各种资源告急读请求太高，严重影响写请求对此，一堆概念也是腾空而出，比如分库分表、读写分离等。
Young丶·2022-12-30 10:05

闭关三月：整理出了这份对标阿里p7的java面试必备指南。

，想要进这种大厂，每个重点的知识点都是要了解的，给大家带来的春招面试必备指南会从面试官的心理分析，大厂经常问到的问题，以及对面试的问题分析，分享给大家，涉及到的知识点包含了有消息队列，Redis缓存，分库分表
·2022-12-29 13:28

实战！Spring Boot 整合 阿里开源中间件 Canal 实现数据增量同步！

但是随着业务量增大，数据量变多以及各种复杂场景下的分库分表的实现，使数据同步变得越来越困难。今天这篇文章使用阿里开源的中间件Canal解决数据增量同步的痛点。文章目录如下：Canal是什么？
·2022-12-28 10:38

如何构建企业内的 TiDB 自运维体系

为了应对这些问题，我们采取了诸多措施如单库按业务逻辑拆分成多个库的垂直拆分，分库分表的水平拆分、一主多从读写分离等。这些技改同时也使得整个业务层架构更加复杂，且无法做到透明的弹性，因此我们
weixin_sjk6070·2022-12-23 08:17

关于ShardingSphere内置分片算法及其数据倾斜问题总结

ShardingSphere是一款不错的分库分表中间件，并且其内置提供了多种分片算法。但是使用内置的分片算法会造成数据倾斜问题。
luffylv·2022-12-23 07:12

Java后端面试准备

自我介绍：我的学制是两年，目前研一，接下来我列举两个我的项目经历；一个是运行环境智能云平台，技术栈采用springboot+vue+mybatis的前后端分离架构，这个项目有两个技术难点，第一个是需要采用分库分表的策略
寅贝勒·2022-12-23 05:14

九种分布式ID生成方式

但随着数据日渐增长，主从同步也扛不住了，就需要对数据库进行分库分表，但分库分表后需要有一个唯一ID来标识一条数据，数据库的自增
菜鸟吉吉·2022-12-23 03:51

分布式ID

假设在多服务器情况下，分库分表（sharding-JDBC）在分库之后，数据遍布在不同服务器上的数据库，数据库自增主键已经没有办法满足主键唯一了。如何为不同的数据节
白夕lla·2022-12-23 03:21

九种分布式ID生成算法详解

但随着数据日渐增长，主从同步也扛不住了，就需要对数据库进行分库分表，但分库分表后需要有一个唯一ID来标识一条数据，数据库的自增ID显然不能满足需求；例如我们的订单，需要有一个全局唯一标识的订单号，这个订单号就是分布式
Crystalqy·2022-12-23 03:50

MySQL集群解决方案

**1：mysql数据分库分表,读写分离，主从切换使用mycat2：集群方案(分布式+集群)**分布式：不同的服务器部署不同的模块/工程，他们之间通过RPC/Rmi通信和调用，对外提供服务和组内协作集群
mumu_wangwei·2022-12-22 22:21

面试：分库分表经典15连问

目录1.我们为什么需要分库分表1.1为什么要分库1.2为什么要分表2.什么时候考虑分库分表？
南极找南·2022-12-21 21:17

如何构建企业内的 TiDB 自运维体系

为了应对这些问题，我们采取了诸多措施如单库按业务逻辑拆分成多个库的垂直拆分，分库分表
·2022-12-20 19:27

分布式id php,Golang 分布式 ID 生成器

对这个ID还希望其中能带有一些时间信息，这样即使我们后端的系统对记录进行了分库分表，也能够以时间顺序对这些记录进行排序。Twitter的snowflake算法是这种场景下的一个典型解法。
weixin_39631467·2022-12-18 08:53

分布式唯一ID的生成之雪花算法(Go实现)

分布式唯一ID的生成背景：在分布式架构下,唯一序列号生成是我们在设计一个尤其是数据库使用分库分表的时候会常见的一个问题特性:全局唯一,这是基本要求,不能出现重复数字类型,趋势递增,后面的ID必须比前面的大长度短
Blockchain210·2022-12-18 08:34

后分库分表时代的数据库新选择：二维火搭载OceanBase再出发

如今，在中国任意走进一家餐饮商户，不论其规模大小，扫码点餐、自助点餐机、商家点餐小程序等已经基本成为标配。随着餐饮行业数智化持续加速推进，餐饮SaaS已经逐渐成为商户们的“必选题”，二维火便是这“必选题”之一。2007年，二维火发布餐饮管理系统1.0，深耕餐饮SaaS领域十余年，目前，二维火已经形成涵盖智能化找店、点餐、营销、管理、供应链服务的全产品矩阵，服务商户49万余家，服务范围覆盖400多个
weixin_sjk6070·2022-12-17 19:51

数据切分的设计方案

文章目录1.数据的切分实现方式1.1.垂直切分1.2.水平拆分1.3.整体方案总结2.MyCat的整体分析2.1.MyCat的内部逻辑2.2.MyCat实现数据分库分表3.MyCat安装应用4.MyCat
开 端·2022-12-17 10:19

分布式全局唯一 ID生成器(百度UidGenerator)

在分库分表中必定会面临着一个问题，就是如何快速高效的生成唯一性ID。使用UUID作为主键？生成的ID是字符串，不是数字，难以比较大小生成的不是有序增长的，在很多的查询中不方便使用数据库主键
欲无缘·2022-12-17 08:57

SpringCloudAlibaba-Seata

是由于数据库的拆分和分布式架构(微服务)带来的，在常规情况下，我们在一个进程中操作一个数据库，这属于本地事务，如果在一个进程中操作多个数据库，或者在多个进程中操作一个或多个数据库，就产生了分布式事务；（1）数据库分库分表就产生了分布式事务
会编程的老六·2022-12-14 13:12

Mysql存储过程批量操作库表

/*分库分表时，批量操作数据库（支持多库中表号一直累计的情况）*/BEGINset@out=8;--数据库个数set@in=256;--每个库的表个数set@out_st=0;set@in_st=0;WHILE
Roda的博客·2022-12-12 15:49

mysql 分库查询_mysql分库后怎么查询

分库分表的策略,依项目需求而定,这里采用的是常规的做法:根据取模的方式,假设我们水平分库2个,每个库又水平拆表2个既总共有4个表,查询的时候默认没有按照其他的条件进行排序,假设我们要查询第41页的数据,
鑫语人间·2022-12-12 15:49

MySQL 分库分表实践

文章目录一、为什么要分库分表二、库表太大产生的问题三、垂直拆分1.垂直分库2.垂直分表四、水平分表1.配置水平分表2.测试水平分表一、为什么要分库分表数据库架构演变刚开始多数项目用单机数据库就够了，随着服务器流量越来越大
BugMaker-shen·2022-12-12 15:18

Mysql分库分表

1、分库分表有什么用分库分表就是为了解决由于数据量过大而导致数据库性能降低的问题，将原来独立的数据库拆分成若干数据库组成，将数据大表拆分成若干数据表组成，使得单一数据库、单一数据表的数据量变小，从而达到提升数据库性能的目的
也拟泛轻舟~·2022-12-12 15:46

ShardingSphere jdbc实现分库分表核心概念详解

目录ShardingSphereSharding-JDBCSharding-JDBC包含的一些核心概念分片策略算法分片算法分片策略分片策略配置类ShardingSphereShardingSphere是一套开源的分布式数据库中间件解决方案组成的生态圈，它由Sharding-JDBC、Sharding-Proxy和Sharding-Sidecar（计划中）这3款相互独立的产品组成。他们均提供标准化的
·2022-12-12 04:31

字节跳动技术总监整理的这份MySQL学习文档，看完才发现要学的可太多了！

做分库分表，要懂主从，懂读写分离。做安全，要懂权限，懂备份，懂日志。做云数据库，要懂源码，懂瓶颈。相信大家对于MySQL都不陌生，尤其是索引，索引(Index)是帮助MySQL高效获取数据的数据结构。
跟着我学Java·2022-12-11 07:32

狂神redis课程笔记

Redis文章目录RedisNosql单机SQL时代，更多使用静态网页Memcached缓存+MySQL+垂直拆分（读写分离）分库分表+水平拆分+M有SQL集群最近的年代最后总结为什么要用NoSQL大数据时代的
好运haoyun·2022-12-10 21:26

Sharding-Proxy分库分表

Sharding-Proxy分库分表1.下载2.准备两个数据库，两张表3.修改conf文件夹下面的server.yaml和config-sharding.yaml4.启动,进入bin目录5.连接shardingSphere
一根稻草君·2022-12-10 04:59

Sharding-Proxy实战(水平分表、水平分库、垂直分表、读写分离)

Sharding-Proxy就可以解决Sharding-JDBC上遇到问题，Sharding-Proxy定位为透明化的数据库代理端，提供封装了数据库二进制协议的服务端版本，用于完成对异构语言的支持，简单来说分库分表的工作都由
JolyouLu·2022-12-10 04:28

mysql代理 分库_sharding-proxy代理分库分表配置

shardingproxy代理mysql实现分库的步骤：下载解压tarxvfapache-shardingsphere-4.1.0-sharding-proxy-bin.tar.gz使用mysql数据库时需要自己导入运行工具：(1)下载(2)解压：tarxvfmysql-connector-java-5.1.47(3)把运行jar复制到shardingproxy的lib/下cdcdmysql-co
宇较瘦·2022-12-10 04:21

Apache Sharding-Proxy分库分表生产实践

目录版本说明，写在前面的话可视化工具连接配置说明SQL分库分表概述逻辑表真实表数据节点绑定表广播表分片分片键分片算法分片策略SQLHint配置说明分片规则数据源配置表配置数据节点配置分片策略配置自增主键生成策略行表达式
攻城狮悠扬·2022-12-10 04:20

Sharding-Proxy分库分表和数据加密

文章目录Sharding-Proxy分库分表和数据加密使用场景配置文件讲解server.yamlconfig-sharding.yamlconfig-encrypt.yaml其他使用情况总结Sharding-Proxy
坚持是一种态度·2022-12-10 04:49

Sharding-Proxy——分库分表+读写分离

一、简介sharding-proxy定位为透明化的数据库代理端，提供封装了数据库二进制协议的服务端版本，用于完成对异构语言的支持。目前先提供MySQL/PostgreSQL版本，它可以使用任何兼容MySQL/PostgreSQL协议的访问客户端(如：MySQLCommandClient,MySQLWorkbench,Navicat等)操作数据，对DBA更加友好。向应用程序完全透明，可直接当做MyS
tingxuejianghu·2022-12-10 04:48

apache/sharding-proxy5.0 分库分表 教程 详解

apache/sharding-proxy分库分表https://shardingsphere.apache.org/document/current/en/overview/(官方文档)sharding
伺·2022-12-10 04:44

mysql高可用分库分表ShardingSphere之Sharding-proxy

文章目录一、ShardingSphere1.1、官网地址说明1.2、为什么分库分表二、官网整合说明1.1、下载sharding-proxy1.2、sharding-proxy集成注册中心1.3、查看配置手册
suqinyi·2022-12-10 04:14

分库分表利器sharding-proxy

官网地址：概览::ShardingSphereSharding-Proxy是一个分布式数据库中间件，定位为透明化的数据库代理端。作为开发人员可以完全把它当成数据库，而它具体的分片规则在Sharding-Proxy中配置。定位为透明化的数据库代理端，提供封装了数据库二进制协议的服务端版本，用于完成对异构语言的支持。目前提供MySQL和PostgreSQL（兼容openGauss等基于PostgreS
霜雪回眸·2022-12-10 04:13

Sharding-Proxy 实现分库分表

一、简介Sharding-Proxy是ShardingSphere的第二个产品。它定位为透明化的数据库代理端，提供封装了数据库二进制协议的服务端版本，用于完成对异构语言的支持。目前先提供MySQL/PostgreSQL版本，它可以使用任何兼容MySQL/PostgreSQL协议的访问客户端(如：MySQLCommandClient,MySQLWorkbench,Navicat等)操作数据，对DBA
星夜孤帆·2022-12-10 04:41

sharding-proxy分库分表最佳实践

简介Sharding-Proxy分库分表、读写分离，它和mycat类似，属于中间件代理层，它类似一个数据库，代理后面的分库分表的多个数据库，它屏蔽了后端多个数据库的复杂性，应用开发时直接连接Sharding-Proxy
hzjmllp686·2022-12-10 04:53
上一页 26 27 28 29 30 31 32 33 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他