分库分表.

链路追踪eagleEye介绍

这些应用之间一般有RPC调用和异步消息通讯两种手段，RPC调用会产生一层调一层的嵌套，一个消息发布出来更会被多个应用消费，另外，应用还会访问分库分表的数据库、缓存、存储等后端，以及调用其他外部系统如支付
march of Time·2023-06-17 03:08

MySQL分库分表

数据库架构演变刚开始多数项目用单机数据库就够了，随着服务器流量越来越大，面对的请求也越来越多，我们做了数据库读写分离，使用多个从库副本（Slave）负责读，使用主库（Master）负责写，master和slave通过主从复制实现数据同步更新，保持数据一致。slave从库可以水平扩展，所以更多的读请求不成问题。但是当用户量级上升，写请求越来越多，怎么保证数据库的负载足够？增加一个Master是不能解
FuzhouJiang·2023-06-17 01:49

Python + HDF5 因子计算与 DolphinDB 一体化因子计算方案对比

传统的关系数据库如MSSQLServer或MySQL已经很难支撑该量级的数据，即便分库分表，查询性能也远远无法达到要求。
DolphinDB智臾科技·2023-06-16 16:04

SpringCloud：分布式事务Seata

2.分布式事务的产生的原因2.1.数据库分库分表当数据库
Mr.D.Chuang·2023-06-16 14:44

mysql面试常见问题

请简述MySQL中的分库分表策略，以及其优缺点。什么是慢查询？如何检测和优化慢查询？MySQL中如何确保数据的安全性？你
—Phoenix·2023-06-16 13:42

数据库相关优化方案

软件层面包括：SQL调优、表结构优化、读写分离、数据库集群、分库分表等；硬件层面主要是增加机器性能。1.SQL调优SQL调优往往是解决数据库问题的第一步，往往投入少部分精力就能获得较大的收益。
小白_学编程·2023-06-16 10:39

Canal 组件简介与 vivo 帐号实践

互联网应用随着业务的发展，部分单表数据体量越来越大，应对服务性能与稳定的考虑，有做分库分表、数据迁移的需要，本文介绍了vivo帐号应对以上需求的实践。
·2023-06-16 10:24

数据库分库分表思路

一.数据切分关系型数据库本身比较容易成为系统瓶颈，单机存储容量、连接数、处理能力都有限。当单表的数据量达到1000W或100G以后，由于查询维度较多，即使添加从库、优化索引，做很多操作时性能仍下降严重。此时就要考虑对其进行切分了，切分的目的就在于减少数据库的负担，缩短查询时间。数据库分布式核心内容无非就是数据切分（Sharding），以及切分后对数据的定位、整合。数据切分就是将数据分散存储到多个数
肥常忧伤·2023-06-16 07:55

面试官：给我讲一下分库分表方案

作者：尜尜人物链接：https://www.cnblogs.com/littlecharacter/p/9342129.html一、数据库瓶颈1、IO瓶颈2、CPU瓶颈二、分库分表1、水平分库2、水平分表
夜空_2cd3·2023-06-16 04:49

靠着这套Github标星55K的Java面试笔记，成功拿到了2个大厂offer

2、看你上面有接触过消息中间件，负载均衡、RPC框架等技术吗，MySQL分库分表有做过吗？3、分布式架构设计，Redis分布式锁呢？是不是看上去很难，是
进阶的架构师·2023-06-16 01:54

阿里 P8 架构师总结的 Java 面试笔记，上线仅七天，Github 标星 55K

2、看你上面有接触过消息中间件，负载均衡、RPC框架等技术吗，MySQL分库分表有做过吗？3、分布式架构设计，Redis分布式锁呢？是不是看上去很难，是
海害嗨·2023-06-15 20:24

如何设计秒杀系统（一）

要完成这个目标有两个思路，“减”和“分"，减指的是要充分渐少不必要的请求，做到用户请求的数据尽量少、请求数尽量少、路径尽量短、依赖尽量少，不要有单点；”分“则指的是要合理进行数据库的分库分表。
xtl丶·2023-06-15 15:43

分库分表-ShardingSphere

分库分表拆常见分方法与特点分片策略数据分布以后扩展基于Hash：hash(分片键)%分片数数据分布均匀不易扩容，扩容需要数据迁移范围分片：例如按年分，按月，按日数据分表可能不均匀易扩展，扩展不需要数据迁移分库分表的常见问题与解决方式如何确定最初需要多少张表
温安适·2023-06-15 06:06

2023最新版互联网工程师Java中级、高级面试题总结(1000道题含答案解析)

2、看你上面有接触过消息中间件，负载均衡、RPC框架等技术吗，MySQL分库分表有做过吗？3、分布式架构设计，Redis分布式锁呢？是不是看上去很难，
海害嗨·2023-06-15 01:53

分库分表环境下，如何进行数据表结构同步？

问题背景对于一个游戏来说，分库分表是最常见的操作。对于多个环境下，我们如何保证表结构的一致性呢？
_好吗_好的·2023-06-14 22:58

DBA 小记 — 分库分表、主从、读写分离

前言我在上篇博客“SpringBoot的实践与思考”中比对不同规范的ORM框架应用场景的时候提到过主从与读写分离，本篇随笔将针对此和分库分表进行更深入地探讨。
weixin_30270561·2023-06-14 16:47

分库分表 21 招

（一）好好的系统，为什么要分库分表？咱们先介绍下在分库分表架构实施过程中，会接触到的一些通用概念，了解这些概念能够帮助理解市面上其他的分库分表工具，尽管它们的实现方法可能存在差异，但整体思路基本一致。
Java程序员老张·2023-06-13 07:32

分布式数据库 Join 查询设计与实现浅析 | 京东云技术团队

本文记录Mysql分库分表和ElasticsearchJoin查询的实现思路，了解分布式场景数据处理的设计方案。
京东云技术团队·2023-06-13 02:45

分库分表

原因：数据量过大导致数据库性能降低。a.垂直分库：按照业务将不同的表分类放到不同数据库上。解决业务层耦合能对不同业务的数据进行管理，维护，监控和扩展。高并发场景下提高IO、数据库连接数。b.垂直分表：按字段分表，将不常使用的字段分到另一个表。尽量避免连表查询，得不偿失。避免io争抢并减少锁表几率充分发挥热门数据的操作效率，不会被冷门信息的低效率拖累，减少io操作。数据库以行为单位加载数据到内存，字
MisAutumn·2023-06-12 23:56

95-分库分表技术之ShardingJDBC

分库分表技术之ShardingJDBCShardingJDBC：回顾上一章的分库分表方式：分库分表的目的就是将我们的单库的数据控制在合理范围内，从而提高数据库的性能垂直拆分（按照结构分）：垂直分表：将一张宽表
各个方面都自在·2023-06-12 22:07

安卓怎么把数据直接插入mysql_NoSql数据库，是怎么解决我们高并发场景下MySql表现的不足...

主要基于读写分离主从复制以及数据分库分表实现的。
weixin_39598308·2023-06-12 20:43

【201期】MySQL 千万级数据量跨库分页、 分表分页，为什么这么难？

每天08:15更新文章，每天进步一点点...当业务数据达到一定量级(比如：mysql单表记录量>1千万)后，通常会考虑“分库分表”将数据分散到不同的库或表中，这样可以大大提高读/写性能。
Java精选·2023-06-12 20:09

千万级并发架构下，如何进行关系型数据库的分库分表

文章目录面试常见问题1.Mysql数据库海量数据带来的性能问题2.Mysql常见的优化手段3.大数据表优化方案4.详解分库分表4.1垂直拆分4.1.1单库的垂直拆分4.1.2多库垂直拆分4.2水平拆分4.2.1
ZNineSun·2023-06-12 20:37

Day05 04-MySQL分库分表介绍

文章目录第十七章MySQL分库分表17.1什么是分库分表17.2为什么要分库分表17.3垂直切分17.3.1垂直分库17.3.2垂直分表17.4水平切分17.4.1水平分库17.4.2水平分表17.4.3
Aidon-东哥博客·2023-06-12 18:47

15天学习MySQL计划（运维篇）分库分表-监控-第十四天

15天学习MySQL计划分库分表-监控-第十四天1.介绍1.问题分析随着互联网及移动互联网的发展，应用系统的数据量也是成指数式增加，若采用但数据进行数据存储，存在以下性能瓶颈：IO瓶颈：热点数据太多，数据库缓存不足
征服bug·2023-06-12 13:52

分库分表用这个就够了

#一、前言2018年写过一篇分库分表的文章《[SpringBoot使用sharding-jdbc分库分表](https://www.cnblogs.com/2YSP/p/9746981.html)》，但是存在很多不完美的地方比如
烟味i·2023-06-12 10:00

国产化浪潮下TiDB解决的痛点问题

前言随着国内互联网企业的快速发展，传统的oracle数据库架构在成本和扩展性上已不能满足要求，更多的企业将目光转向了开源的MySQL数据库，由于MySQL本身是一个单机数据库其本身并不具备横向扩展能力，于是出现了应用侧的分库分表方案
TiDB社区干货传送门·2023-06-12 09:47

ShardingSphere

目录1.ShardingSphere分表与分库分表2.ShardingSphere分库分表查询3.自定义分片算法实现range查询
Jonathan丶BNTang·2023-06-12 02:17

MySQL分库分表篇

1传统项目结构076.png2数据库性能瓶颈①数据库连接数据库连接是非常稀少的资源,MySQL数据库默认100个连接，单机最大1500连接。如果一个库里既有用户相关的数据又有商品、订单相关的数据，当海量用户同时操作时,数据库连接就很可能成为瓶颈。②数据量MySQL单库数据量在5000万以内性能比较好，超过阈值后性能会随着数据量的增大而变弱。MySQL单表的数据量是500w-1000w之间性能比较好
MiniSoulBigBang·2023-06-11 23:36

我们为什么要分库分表？

在文章开头先抛几个问题：（1）什么时候才需要分库分表呢？我们的评判标准是什么？（2）一张表存储了多少数据的时候，才需要考虑分库分表？（3）数据增长速度很快，每天产生多少数据，才需要考虑做分库分表？
PP_2022·2023-06-11 21:13

MyCat2之介绍与名词解释

其核心功能是分库分表，即将一个大表水平的分割成N个小表，存储在MySql服务器中。
lgcgkCQ·2023-06-11 17:32

分布式架构 - ID 生成器 hash 算法

在日常开发中，如果我们在设计数据库表的时候要考虑到如下内容1、索引列和常用的字段尽量放置在一张表上2、不常用的字段可以作为扩展字段放置在扩展表上3、索引的优化4、分库分表的实现5、查询的优化那么本章我们以用户表为例
倾听岁月·2023-06-11 13:17

微实验：MyCat实践（三）

3、分库分表先了解一下MyCat配置，MyCat配置主要涉及以下三个文件：核心配置文件3.1、编辑配置文件温馨提示：只需要配置主服务器的MyCat，此处不对server.xml做任何修改。
十月秋雨·2023-06-11 10:42

京东业务系统数据库分库分表架构设计

分析结果表明数据库很可能成为影响性能的瓶颈，并决定对数据库底层做分库分表改造，确保数据水平动态扩
英杰王·2023-06-11 08:21

MYSQL分库分表

一：数据库瓶颈由于公司用户数据量持续增长，MySQL单库单表架构的性能问题就暴露出来了。影响数据库性能主要有以下几个因素：1）数据量MySQL单库数据量在5000万以内性能比较好,超过阈值后性能会随着数据量的增大而变弱。MySQL单表的数据量是500w-1000w之间性能比较好,超过1000w性能也会下降。单表数据量太大，查询时扫描的行太多，SQL效率低。2：数据库连接瓶颈（IO瓶颈）第一种：磁盘
675ea0b3a47d·2023-06-10 23:08

浅学一下分布式事务

但是前提是：1）数据库支持事务（如：MySQL的innoDB引擎）2）所有业务都在同一个服务、同一个数据库中执行随着微服务架构的引入，需要对数据库进行分库分表
阳光宅男dh·2023-06-10 20:09

MySQL运维篇（二）

具体的分库分表的策略，只需
真滴book理喻·2023-06-10 19:12

分库分表架构实践(文末送书)

关注高并发、高可用的架构设计，对系统服务化、分库分表、性能调优等方面有深入研究和丰富实践经验。热衷于技术研究和分享。
架构师小秘圈·2023-06-10 19:40

用好 mysql 分区表

那么，业务量在增长，数据到瓶颈了怎么办呢，除了使用分布式数据库，我们也可以自行分库分表，或者利用mysql的分区功能实现。本文主要介绍几种分区的选型建议和语法，其实影
入伍击寇·2023-06-10 19:31

Mysql第四章 分库分表，读写分离，主从架构

这里写自定义目录标题一分库分表1为什么要分库分表2分库分表的几种方式2.1垂直拆分2.1.1表的垂直拆分2.1.2库的垂直拆分2.1.2垂直拆分的特点2.2水平拆分2.2.1表的水平拆分2.2.2库的水平拆分
YT20233·2023-06-10 17:19

21 条法则助你“玩转”分库分表

好好的系统，为什么要分库分表？我们结合具体业务场景，以t_order表为例进行架构优化。由于数据量已经达到亿级别，查询性能严重下降，因此我们采用了分库分表技术来处理这个问题。
力哥讲技术·2023-06-10 13:13

发号器设计 Leaf-segment(美团)

如果以后有性能需求需要对数据库扩容，不需要上述描述的复杂的扩容操作，只需要对biz_tag分库分表就行。数据库表设计如下：
NeXt4·2023-06-10 11:33

用好 mysql 分区表

那么，业务量在增长，数据到瓶颈了怎么办呢，除了使用分布式数据库，我们也可以自行分库分表，或者利用mysql的分区功能实现。本文主要介绍几种分区的选型建议和语法，其实影
红红火火a·2023-06-10 07:50

Mycat中间件综合部署高可用-读写分离-分库分表（1.6）

Mycat中间件综合部署（1.6）实施拓扑一，环境搭建1.服务分配主机服务192.168.2.1MySQL-cluster-1192.168.2.2MySQL-cluster-2192.168.2.3Mycat2.MySQL-cluster1分配server-id端口角色13306master123307slave133308master243309slave23.MySQL-cluster2分配
征服bug·2023-06-10 03:17

分布式数据库 Join 查询设计与实现浅析 | 京东云技术团队

本文记录Mysql分库分表和ElasticsearchJoin查询的实现思路，了解分布式场景数据处理的设计方案。
·2023-06-09 14:19

MySQL - 分库分表、MyCat配置、分片规则

文章目录分库分表一、概述1.1分库分表原因1.2拆分策略1.2.1垂直拆分1.2.2水平拆分1.3实现技术二、安装Mycat2.1介绍2.2安装三、MyCat入门3.1环境准备3.2分片配置3.2.1schema.xml3.2.2server.xml3.3
我爱布朗熊·2023-06-09 11:40

分布式数据库 Join 查询设计与实现浅析

本文记录Mysql分库分表和ElasticsearchJoin查询的实现思路，了解分布式场景数据处理的设计方案。
京东云技术团队·2023-06-09 09:00

九种分布式ID解决方案

背景在复杂的分布式系统中，往往需要对大量的数据进行唯一标识，比如在对一个订单表进行了分库分表操作，这时候数据库的自增ID显然不能作为某个订单的唯一标识。
大梦谁先觉i·2023-06-09 08:11

Mysql 分库分表

使用分库分表时，主要有垂直拆分和水平拆分两种拆分模式，都属于物理空间的拆分。分库分表方案：只分库、只分表、分库又分表。垂直拆分：由于表数量多导致的单个库大。将表拆分到多个库中。
FYHannnnnn·2023-06-09 03:01

mysql分表后的联合查询_MySQL分库分表分表后数据的查询(5th)

前言在分表完之后显然对于数据的查询会变的比较的复杂，特别是在表的关联方面，在有些情况下根本就不能使用JOIN。其实个人是比较鼓励将那些大的JOINSQL拆分成几个小的SQL来查询数据。这样虽然总体的效率可能会稍稍下降(如果使用了连接池完全可以忽略)，但是查询的语句变简单了，使得后续的维护带来的方便。同时也能带来比较便利的扩展。你可以感受一下有一个100行的SQL语句给你维护，和给你10个10行并且
uare大猪蹄子·2023-06-09 03:31
上一页 17 18 19 20 21 22 23 24 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他