Sharding

主流行架构

gitlab,svn,jenkins,sonar,docker，apollo，catteambition，axure，蓝湖，禅道,WCP；redis，kafka，es，zookeeper，dubbo，shardingjdbc
rainbowcheng·2024-09-15 09:43

sharding-jdbc使用限制

使用限制JDBC未支持列表Sharding-JDBC暂时未支持不常用的JDBC方法。
家常凉菜·2024-09-13 04:24

SpringBoot整合ShardingSphere

SpringBoot整合ShardingSphere文章目录SpringBoot整合ShardingSphere1.概述1.Sharding-JDBC2.Sharding-Proxy3.比较2.ShardingJdbc
陌殇殇·2024-09-12 19:54

中间件的学习理解总结

应用场景企业应用集成分布式系统电子商务移动应用开发五、数据库中间件功能细节：应用优势：六、远程过程调用中间件功能细节：应用优势：七、面向消息的中间件功能细节：应用优势：八、事务处理中间件功能细节：应用优势：数据库中间件MyCat：ShardingSphere
DCDDDDcccc·2024-09-10 13:14

数据库分库分表-ShardingSphere学习

ShardingSphere是一个开源的分布式数据库中间件解决方案，旨在提供数据库分片、分布式事务、读写分离、数据治理等多种数据服务，它以模块化的方式设计，使用户可以根据不同的应用场景选择适合的模块来部署
学Java的skyyyyyyyy·2024-09-06 19:24

Redis在linux环境集群部署详细介绍

第1章：Redis集群概述Redis集群是一种分布式的Redis实例集合，通过数据分片（sharding）和复制
J老熊·2024-09-01 14:02

RocketMQ顺序消费

生产顺序性发送时将ShardingKey相同（例如同一设备）的消
葵续浅笑·2024-08-27 20:35

MySQL表分区与分表：概念、规则及应用案例

MySQL提供了两种有效的数据管理技术来应对这些挑战：表分区（Partitioning）和分表（Sharding）。
J老熊·2024-08-26 22:50

shardingsphere-elastic-job-ui 管理界面安装

下载地址https://shardingsphere.apache.org/elasticjob/current/cn/downloads/将mysql包放到解压文件中，用于事件追踪修改配置文件，会自动创建数据表用于事件追踪其他配置参考下载地址中文档
天道有情战天下·2024-08-23 03:06

发现ElasticJob-UI：分布式任务调度的得力助手

发现ElasticJob-UI：分布式任务调度的得力助手shardingsphere-elasticjob-uiAdministratorconsoleofElasticJob项目地址:https://
黎杉娜Torrent·2024-08-23 02:30

推荐开源项目：ElasticJob-UI —— 强大的弹性任务管理神器

推荐开源项目：ElasticJob-UI——强大的弹性任务管理神器项目介绍ElasticJob-UI是ApacheShardingSphere生态系统中的一个重要组件，它为ElasticJob提供了一款功能强大的可视化管理控制台
任澄翊·2024-08-23 02:30

Sharding sphere分库分表

需要物理自己实现分表分库，然后通过配置文件配置。配置文件：需要配置多个数据源，主从表的关系【默认主表修改，从表读取】，定义分库的策略【比如Userid】和分表【表Id】的策略分库和分表策略：分库策略定义了如何将数据分配到不同的数据库中，例如，可以根据用户ID的范围来进行分库。分表策略定义了如何将数据在表级别进行分片，例如，可以根据表ID来进行分表。过程：从解析sql到路由sql再到改写sql最后到
Kudo新一·2024-03-19 03:10

shardingsphere自定义hint分片算法，完美实现按区域编码数据隔离，没改一行旧代码

因为已经改造了登录平台，实现了集群统一部署，然后后续就是继续弄集中统一部署服务改造（这里的集中统一部署的意思是区别于每个区域私有部署，服务本身还是可以弹性伸缩的），首先改造一个比较简单的白名单微服务，只涉及到三张表，业务逻辑也简单就是CRUD以及关联查询。因为当初这个服务是由其他人实现交给我这边部署维护一下，具体的业务逻辑和代码我也没看过，所以改造的时候就想着尽量不动代码，无侵入式的或者低侵入式的
·2024-02-26 20:03

使用ShardingJDBC实现分库分表

一、测试环境JDK：1.8SpringBoot：2.7.17MySQL驱动：5.1.49MyBatis：2.3.1shardingJDBC：5.1.0二、核心依赖mysqlmysql-connector-java5.1.49org.mybatis.spring.bootmybatis-spring-boot-starter2.3.1org.apache.shardingspheresharding
不摸鱼的程序员·2024-02-20 15:54

将Spring Cloud项目改造为Spring-cloud-kubernetes项目

，每天掉亿点点头发...源码精品专栏原创|Java2021超神之路，很肝~中文详细注释的开源项目RPC框架Dubbo源码解析网络应用框架Netty源码解析消息中间件RocketMQ源码解析数据库中间件Sharding-JDBC
公众号-芋道源码·2024-02-20 12:44

Redis之分布式搭建及使用快速入门

文章目录1、为什么需要用redis集群2、主从复制a、主从复制配置3、可用性保证之哨兵机制(Sentinel)4、redis分布式方案a、客户端Shardingb、代理Proxy之Twemproxyc、
菜鸟编程98K·2024-02-20 10:02

Sharding-JDBC分库分表（一）

1.概述1.1.分表分库是什么小明是一家初创电商平台的开发人员，他负责卖家模块的功能开发，其中涉及了店铺、商品的相关业务，设计如下数据库：通过以下SQL能够获取到商品相关的店铺信息、地理区域信息：形成类似以下列表展示：随着公司业务快速发展，数据库中的数据量猛增，访问性能也变慢了，优化迫在眉睫。分析一下问题出现在哪儿呢？关系型数据库本身比较容易成为系统瓶颈，单机存储容量、连接数、处理能力都有限。当单
当时明月plus·2024-02-20 07:42

sharding-jbdc入门

1.简介1.1分库分表是什么电商平台，在开发中涉及店铺、商品的相关业务，设计如下数据库通过以下SQL能够获取到商品相关的店铺信息、地理区域信息：SELECTp.*,r.[地理区域名称],s.[店铺名称],s.[信誉]FROM[商品信息]pLEFTJOIN[店铺信息]rONp.[产地]=r.[地理区域编码]LEFTJOIN[店铺信息]sONp.id=s.[所属店铺]WHEREp.id=?形成类似一下
酒徒兄·2024-02-20 07:36

Sharding-JDBC学习笔记

1.基本概念1.1什么是ShardingSphere？ShardingSphere是一个开源的分布式数据库中间件，提供了分布式数据库的跨节点分片和分布式事务解决方案。
重生之Java再爱我一次·2024-02-19 20:03

呵呵，一个 bug 你改了两天？难吗？

源码精品专栏原创|Java2020超神之路，很肝~中文详细注释的开源项目RPC框架Dubbo源码解析网络应用框架Netty源码解析消息中间件RocketMQ源码解析数据库中间件Sharding-JDBC
Java基基·2024-02-19 16:55

Sharding-JDBC分库分表（源自：黑马程序员）

1.概述小明是一家初创电商平台的开发人员，他负责卖家模块的功能开发，其中涉及了店铺、商品的相关业务，设计如下数据库：通过以下SQL能够获取到商品相关的店铺信息、地理区域信息：selectp.*,r.[地理区域名称],s.[店铺名称],s.[信誉]from[商品信息]pleftjoin[地理区域]ronp.[产地]=r.[地理区域编码]leftjoin[店铺信息]sonp.id=s.[所属店铺]wh
2301_78533951·2024-02-19 14:08

数据库是如何分片的？

本文翻译自Howdoesdatabaseshardingwork?，如有疑问，请联系译者了解什么是数据库分片，分片如何工作的，以及一些常见的分片框架和工具。
qq_33419925·2024-02-13 21:38

京东平台研发：领域驱动设计（DDD）实践总结

，每天掉亿点点头发...源码精品专栏原创|Java2020超神之路，很肝~中文详细注释的开源项目RPC框架Dubbo源码解析网络应用框架Netty源码解析消息中间件RocketMQ源码解析数据库中间件Sharding-JDBC
公众号-芋道源码·2024-02-13 18:26

分库分表的几种常见玩法及如何解决跨库查询等问题

在谈论数据库架构和数据库优化的时候，我们经常会听到“分库分表”、“分片”、“Sharding”…这样的关键词。
牧童US·2024-02-13 15:08

NetCore框架WTM的分表分库实现

Python量化交易实战入门级手把手带你打造一个易扩展、更安全、效率更高的量化交易系统介绍本期主角:ShardingCore一款ef-core下高性能、轻量级针对分表分库读写分离的解决方案，具有零依赖、
xuhss_com·2024-02-13 08:37

.Net框架下EF分表方案

（非.netcore）在EF6基础上最容易实现的分表方案；思路使用手动sql+EF，案例开源库实现EF的分表，如FreeSql库在EFCore实现分表，已有针对EFCore的分表方案，如EFCore.Sharding
EverestVIP·2024-02-13 08:05

领导：谁再用 Redis 实现过期订单关闭，立马滚蛋！

，每天掉亿点点头发...源码精品专栏原创|Java2021超神之路，很肝~中文详细注释的开源项目RPC框架Dubbo源码解析网络应用框架Netty源码解析消息中间件RocketMQ源码解析数据库中间件Sharding-JDBC
公众号-芋道源码·2024-02-11 22:24

RocketMQ 源码分析 —— 集成 Spring Boot

源码精品专栏原创|Java2020超神之路，很肝~中文详细注释的开源项目RPC框架Dubbo源码解析网络应用框架Netty源码解析消息中间件RocketMQ源码解析数据库中间件Sharding-JDBC
公众号-芋道源码·2024-02-11 06:33

基于 ShardingSphere 的分布式数据库负载均衡架构搭建实战

本文主要分为3部分，将依次介绍：基于ShardingSphere的分布式数据库「负载均衡架构搭建」要点结合实际的「用户问题案例」，介绍引入「负载均衡」的影响介绍并展示ShardingSphere分布式数据库在云上的
ShardingSphere·2024-02-11 03:22

数据库切片大对决：ShardingSphere与Mycat技术解析

欢迎来到我的博客，代码的世界里，每一行都是一个故事数据库切片大对决：ShardingSphere与Mycat技术解析前言ShardingSphere与Mycat简介工作原理对比功能特性对比前言在数据库的舞台上
一只牛博·2024-02-10 07:17

Excel百万级数据导入导出，EasyExcel 才是 yyds

，每天掉亿点点头发...源码精品专栏原创|Java2021超神之路，很肝~中文详细注释的开源项目RPC框架Dubbo源码解析网络应用框架Netty源码解析消息中间件RocketMQ源码解析数据库中间件Sharding-JDBC
Java基基·2024-02-09 16:28

Bee V2.2 分库分表 Sharding+MongoDB ORM 稳定版发布 (更新 Maven)

Hibernate/MyBatis+plus+ShardingJDBC+Jpa+Springdata+GraphQL+AppORM(Android,鸿蒙)=Bee小巧玲珑！
abckingaa·2024-02-09 07:28

Bee+SpringBoot稳定的Sharding、Mongodb ORM功能(同步 Maven)

Hibernate/MyBatis+plus+ShardingJDBC+Jpa+Springdata+GraphQL+AppORM(Android,鸿蒙)=Bee小巧玲珑！
abckingaa·2024-02-09 07:27

基于Sharding Sphere实现数据“一键脱敏”

在真实业务场景中，数据库中经常需要存储某些客户的关键性敏感信息如：身份证号、银行卡号、姓名、手机号码等，此类信息按照合规要求，通常需要实现加密存储以满足合规要求。痛点一：通常的解决方案是我们书写SQL的时候，把对应的加密字段手动进行加密再进行插入，在查询的时候使用之前再手动进行解密。此方法固然可行，但是使用起来非常不便捷且繁琐，使得日常的业务开发与存储合规的细节紧耦合痛点二：对于一些为了快速上线而
谁叫我土豆了·2024-02-09 00:37

ShardingSphere 5.x 系列【7】元数据持久化

本系列SpringBoot版本3.1.0本系列ShardingSphere版本5.4.0源码地址：https://gitee.com/pearl-organization/study-sharding-sphere-demo
云烟成雨TD·2024-02-07 18:15

Elasticsearch单个索引数据量过大的优化

为了优化和应对大索引的挑战，可以考虑以下策略：1.使用分片和副本分片（Sharding）：ES自动将索引分成多个分片，分布式地存储和处理数据。
围城客·2024-02-07 11:46

ElasticJob分布式调度，分布式多个微服务执行只需要执行一个定时任务，基本概念介绍（一）

所以里面的定时任务在不同的节点不应该同时进行，应该使用其中一个节点做定时任务，目前寻找的方案为ElasticJob，这个篇章简单介绍一下ElasticJob简介1Elastic-job官网地址：https://shardingsphere.apache.org
时间是一种毒药·2024-02-06 23:47

Mongodb Sharding 搭建

前面我们介绍了mongodb的架构。下面我们就来实际搭建一个mongodbshardedcluster。mongodbshardedcluster.png首先搭建我们的shardserver，本例中是起了两个单实例的mongodbserver，当然你也可以每个shard都部署为副本集模式。这里我们简单起见先都为单实例。配置：//mongo1logpath=D:\mongo\data\log\mon
Minato666·2024-02-06 19:27

ShardingSphere-Proxy5搭建使用

ShardingSphere-Proxy5搭建使用ApacheShardingSphere下的一个产品，定位为透明化的数据库代理端，与mycat类似，所有的分片都由其完成。
Echo_bf84·2024-02-06 18:22

ElasticJob 3.0 带你快速入门

ElasticJobElasticJob简介当当网开源的分布式定时任务框架，后被apache基金会支持；官方文档：https://shardingsphere.apache.org/elasticjob
@lihewei·2024-02-06 07:00

openGauss X ShardingSphere，分布式方案的另一种最佳实践

面对如今海量数据，超高并发等诸多场景，openGauss将目光转向于分布式解决方案，专注于解决海量数据存储、超高并发吞吐、大表瓶颈等众多难题，与ShardingSphere一起构建全栈开源分布式解决方案
胡正策·2024-02-06 00:06

启动shardingsphere-proxy报错

--问题描述启动shardingsphere-proxy报错[INFO]2024-02-0515:47:44.920[main]o.o.core.v3.ConnectionFactoryImpl-Connectcomplete.ID
福娃筱欢·2024-02-06 00:35

ShardingSphere实现openGauss分布式架构

本文档采用openGauss结合ShardingSphere中间件的架构，实现openGauss数据库分布式OLAP场景的环境部署。
福娃筱欢·2024-02-06 00:34

ShardingSphere 5.x 系列【5】Spring Boot 3 集成并实现读写分离

本系列SpringBoot版本3.1.0本系列ShardingSphere版本5.4.0源码地址：https://gitee.com/pearl-organization/study-sharding-sphere-demo
云烟成雨TD·2024-02-05 17:25

sharding-jdbc 与pageHelper分页报错踩坑

遇到问题Sharding-jdbc4.0.1版本使用pageHelper运行count报错，而且只有部分sql不能运行：原始sqlSELECTuser_id,SUM(total_duration)totalDuration
学的好秃的早·2024-02-05 14:52

ShardingSphere 5.x 系列【3】分库分表中间件技术选型

本系列SpringBoot版本3.1.0本系列ShardingSphere版本5.4.0源码地址：https://gitee.com/pearl-organization/study-sharding-sphere-demo
云烟成雨TD·2024-02-05 09:40

springboot艰难版本升级之路!! springboot 2.3.x版本升级到2.7.x版本

1.4datasource报错1.5MySQL驱动升级1.6循环依赖报错1.7跨域错误1.8springboot升级后,swagger集成问题1.9springboot升级后,DataSource相关问题(shardingJdbc
漫长的~以后·2024-02-04 23:42

Sharding-JDBC之RangeShardingAlgorithm（范围分片算法）

目录一、简介二、maven依赖三、数据库3.1、创建数据库3.2、创建表四、配置（二选一）4.1、properties配置4.2、yml配置五、范围分片算法六、实现6.1、实体层6.2、持久层6.3、服务层6.4、测试类6.4.1、保存订单数据6.4.2、根据时间范围查询订单一、简介  在我之前的文章里，实际工作中，数据量都不是很好去预估，采用取模等方式非常不好扩展，比如增加服务器，数据得重新迁移
嘉禾嘉宁papa·2024-02-03 14:47

Sharding-JDBC之ComplexKeysShardingAlgorithm（复合分片算法）

目录一、简介二、maven依赖三、数据库3.1、创建数据库3.2、创建表四、配置（二选一）4.1、properties配置4.2、yml配置五、复合分片算法六、实现6.1、实体层6.2、持久层6.3、服务层6.4、测试类6.4.2、根据时间范围查询订单一、简介  实际工作中，按时间分片的比较多，但是也有些特殊的分片，不只是用到一个字段，可能会多个字段，这个时候就要用到复合分片算法来实现了Compl
嘉禾嘉宁papa·2024-02-03 14:47

Mybatis | update 时报错 Can not update sharding key

参考：【已解决】ShardingSphere使用记录，ShardingException:Cannotupdateshardingkey,logictable:[user_log]解决-腾讯云开发者社区
土Bo鼠·2024-02-03 13:39
上一页 1 2 3 4 5 6 7 8 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他