ShardingSphere

shardingsphere4.x源码打包镜像+k8s安装proxy、ui、zookeeper并配置分库

shardingsphere4.x源码打包镜像+k8s安装proxy、ui、zookeeper并配置分库背景相关原理相关环境配置shardingsphere-ui部署运行proxy编译打包编译运行打包zip
死的却是·2023-10-25 07:17

spring sharding JDBC 动态调整数据库连接

springshardingJDBC动态调整数据库连接通过重写ShardingSphereDataSource类来实现代码packageorg.apache.shardingsphere.driver.jdbc.core.datasource
weixin_44728369·2023-10-23 18:19

三 ShardingSphere分库分表实战

1概念逻辑表：逻辑意义上统一的表真实表：数据库中真正存在的表数据节点：数据分片的最小单元。由数据库、数据源组成分片键：用于分片的数据库字段。需要有足够的分辨度分片算法：用于分片的算法，支持=、between、in分片策略：分片键+分片算法。在ShardingJDBC中一般采用基于Groovy表达式的inline分片策略，如user_$->{user_id%8}，通过模8算法拆成8张表，user_0
刺豚灬·2023-10-23 12:25

sahrding-jdbc的雪花算法取模为0或1的问题

工作时无意间发现sahrding-jdbc使用雪花算法生成的id在某一业务分库分表永远在那两个库表里面,排查后这里做下分享环境、配置、问题介绍16库16表使用的是org.apache.shardingsphere.core.strategy.keygen
渣渣港·2023-10-18 21:12

Sharding JDBC如何分库分表？看完你就会了

环境准备pom.xmlorg.springframework.bootspring-boot-starter-parent2.1.3.RELEASE1.83.1.0io.shardingspheresharding-jdbc-core
我是IT界小白·2023-10-18 20:09

spring.shardingsphere + mybatis plus 配置多数据源

1.引入依赖   org.apache.shardingsphere   sharding-jdbc-spring-boot-starter  ${sharding.jdbc.spring}  org.apache.shardingsphere
一个想成为muscle man的程序员·2023-10-18 10:52

ShardingSphere-Proxy 5.2版本安装试用--保姆级教程

一般情况下，java项目试用Sharding-jdbc做分库分表，但是开发过程中需要查看数据，分表后很不方便，所以建议采用部署一个proxy来用于开发过程中的数据查询使用，说实话没用过proxy作为项目主要的代理去访问数据，主要考虑点是1.增加了运维2.性能可能存在损耗以下是部署proxy的主要过程版本：proxy5.2部署方式：采用容器部署的方式步骤准备工作mkdir-p/home/shardi
雨读千年·2023-10-18 04:26

Spring Boot 整合 Sharding-JDBC

概述ShardingSphere，它由Sharding-JDBC、Sharding-Proxy和Sharding-Sidecar（计划中）这3款相互独立的产品组成。定位为轻量级Java框架。
终遇你..·2023-10-16 21:33

ShardingSphere读写分离和数据脱敏

读写分离读写分离是通过主从的配置方式，将查询请求均匀的分散到多个数据副本，进一步的提升系统的处理能力。主从架构：读写分离，目的是高可用、读写扩展。主从库内容相同，根据SQL语义进行路由。分库分表架构：数据分片，目的读写扩展、存储扩容。库和表内容不同，根据分片配置进行路由。将水平分片和读写分离联合使用，能够更加有效的提升系统性能，下图展现了将分库分表与读写分离一同使用时，应用程序与数据库集群之间的复
biu~biu~biu_·2023-10-16 11:48

微服务学习系列14：分库分表ShardingSphere

系列文章目录目录系列文章目录前言一、什么是ShardingSphere二、ShardingSphere-JDBC独立部署三、ShardingSphere-Proxy独立部署四、混合部署架构五、数据分片垂直分片水平分片六
yangyanping20108·2023-10-13 19:08

sharding-jdbc主要功能和概念介绍

分片策略可定制4.无中心化分布式主键（snowflake算法）分布式事务1.标准化事务接口2.两阶段提交事务3.柔性事务数据库治理1.配置动态化2.编排和治理3.数据脱敏4.可视化链路追踪主要概念https://shardingsphere.apache.org
李_lifuqing·2023-10-12 20:23

Mysql学习_ShardingSphere_分库分表

第01章高性能架构模式互联网业务兴起之后，海量用户加上海量数据的特点，单个数据库服务器已经难以满足业务需要，必须考虑数据库集群的方式来提升性能。高性能数据库集群的第一种方式是“读写分离”，第二种方式是“数据库分片”。1、读写分离架构**读写分离原理：**读写分离的基本原理是将数据库读写操作分散到不同的节点上，下面是其基本架构图：读写分离的基本实现：主库负责处理事务性的增删改操作，从库负责处理查询操
IT二叔·2023-10-12 08:43

Sharding-JDBC介绍

ShardingSphere是一套开源的分布式数据库中间件解决方案组成的生态圈，它由Sharding-JDBC、Sharding-Proxy和Sha
时光_1024·2023-10-11 05:53

分库分表(3)——ShardingJDBC实践

一、ShardingSphere产品介绍ApacheShardingSphere是一套开源的分布式数据库中间件解决方案组成的生态圈，它由JDBC、Proxy和Sidecar（规划中）这3款相互独立，却又能够混合部署配合使用的产品组成
yangnk42·2023-10-11 04:41

2022-05-31

shardingsphere使用如果使用了druid，依赖必须使用druid，而不能是druid-spring-boot-startercom.alibabadruid1.1.22org.apache.shardingspheresharding-jdbc-spring-boot-starter4.1.0
shuolol·2023-10-09 18:48

分库分表 & ShardingSphere

分库分表带来的问题：1、跨节点连接查询问题2、多数据源管理问题ShardingSphere可以解决分表垂直分表示例：用户在浏览商品列表时，只有对某商品感兴趣时才会查看该商品的详细描述。
Kramer_149·2023-10-08 16:28

elasticjob 教程

ElasticJob-Lite提前安装好ZooKeeper新建一个springboot项目，版本选择2.7.7引入elasticjob-lite-spring-boot-starter依赖org.apache.shardingsphere.elasticjobelasticjob-lite-spring-b
阿东-007·2023-10-06 13:25

还在搞MVC？DDD才是yyds！

「关注“石杉的架构笔记”，大厂架构经验倾囊相授」儒猿技术团队最新出品《基于ShardingSphere的分库分表实战》文章来源：【公众号：Java研发】DDD这几年越来越火，资料也很多，大部分的资料都偏向于理论介绍
石杉的架构笔记·2023-10-04 12:32

Mysql分库分表

1.原理2.ShardingJDBC官网https://shardingsphere.apache.org/2.1水平拆分创建一个新的springboot项目导入依赖,直接将原本的dependencies
vcoy·2023-10-02 20:45

分布式ID概述和雪花算法snowflake详解

1.3算法特点2.原理2.1实现原理2.2缺点2.2.1时钟回拨2.2.2机器id分配与回收问题3.实现3.1位运算基础3.2徒手撸一遍3.2.1算法代码3.2.2难点讲解3.3中间件的实现3.3.1shardingsphere-proxy
凡尘技术·2023-10-02 20:12

ssm中配合druid连接池使用sharding-sphere的读写分离功能

pom中加依赖org.apache.shardingspheresharding-jdbc-core4.0.1org.apache.shardingspheresharding-jdbc-spring-namespace4.0.1
loquito·2023-10-01 14:59

恭喜 SphereEx 联合创始人潘娟成为亚马逊云科技新晋 Data Hero

我们很高兴的宣布，SphereEx联合创始人&CTO、ApacheShardingSpherePMC潘娟，在经过亚马逊云科技对专业技术能力、技术代码贡献、技术布道时长、社交媒体影响力等多个维度的重重筛选
潘娟 Trista·2023-09-30 22:44

从源码看ShardingSphere设计-执行引擎篇

与Spring的JDBCTemplate、TransactionTemplate类似，ShardingSphere中的SQLExecuteTemplate、ExecutorEngine也是如此设计，引擎使用者提供
蚊子squirrel·2023-09-30 22:09

Apache ShardingSphere 5.1.0 正式发布

新年伊始，ApacheShardingSphere迎来了今年的第一个版本的更新，5.1.0版本正式发布。
ShardingSphere·2023-09-30 13:18

springboot sharding-jdbc分表

sharding-jdbc分表pom文件导包yml配置sharding数据库配置分片策略文章例子为按月份分表，将表按月份分为（表_1，表_2…表_12）ShardingSpherepom文件导包cn.hutoolhutool-all5.8.5org.apache.shardingspheresharding-jdbc-spring-boot-starter4.1.1yml
走在菜鸟路上·2023-09-29 04:36

ShardingSphere分库分表（二）：基础介绍

1、简介ApacheShardingSphere是一套开源的分布式数据库中间件解决方案组成的生态圈，它由JDBC、Proxy和Sidecar（规划中）这3款相互独立，却又能够混合部署配合使用的产品组成。
鹤冲天Pro·2023-09-27 08:17

关于com.mysql.cj.jdbc.exceptions.CommunicationsException: Communications link fail解决办法

springboot中shardingsphere配置换数据源后启动时报了以下的错误，觉得挺奇怪的，报错如下图所示：解决方案：排除了连接用户名密码错误、未开通数据库权限等可能性，最终查明由于连接信息中未加参数
全脂主妇·2023-09-27 05:52

解决shardingsphere SQLFeatureNotSupportedException: isValid

原因分析：应该是springboot集成shardingjdbc分库分表数据库连接健康检查不通过，用的5.7的mysql,连接远程mysql8就没有此问题，在5.7上加了配置文件解决报下面的错误org.springframework.dao.InvalidDataAccessApiUsageException:ConnectionCallback;isValid;nestedexceptionis
shan~~·2023-09-27 03:53

高性能架构-数据库分库分表-ShardingSphere

高性能架构-数据库分库分表-ShardingSphereApacheShardingSphere是一套开源的分布式数据库中间件解决方案组成的生态圈，它由JDBC、Proxy和Sidecar（规划中）这3
ctotalk·2023-09-26 10:11

SpringCloud微服务实战——搭建企业级开发框架（二十七）：集成多数据源+Seata分布式事务+读写分离+分库分表

目前有多种方式实现读写分离，一种是Mycat这种数据库中间件，需要单独部署服务，通过配置来实现读写分离，不侵入到业务代码中；还有一种是dynamic-datasource/shardingsphere-jdbc
·2023-09-25 20:09

记录一次伟大的踩坑经验------关于sharding jdbc 4.X版本(现已更名shardingSphere)的坑

1、引子项目使用分库分表，库表规模大约为10个库（包含2019年到2020年）每个库约120张表，总共1200张表。引入shardingjdbc作为底层的分片框架已经一年多了，一直运行良好。虽然小问题不断，但大问题没有，性能稳定，值得赞一个。但由于shardingjdbc只是一个建基于mysql之上的数据分片引擎，其核心无非就是改写sql语句，归并数据集等功能。出于数据分片逻辑的复杂性，它对原生m
天蒙光·2023-09-25 12:33

mysql集群

最为常见的MySql以及ShardingSphere框架，来分库分表。单机---->集群（2）MySql主从同步在MySQL运行的过程中，打开BinLog日志，在从库上起一个线程，与主库链接。
596506678·2023-09-25 10:00

Mycat与ShardingSphere如何选择（未完待续）

区别MycatSharding-JDBCSharding-ProxySharding-Sidecar官方网站官方网站官方网站官方网站官方网站源码地址GitHubGitHubGitHubGitHub官方文档Mycat权威指南官方文档官方文档官方文档开发语言JavaJavaJavaJava开源协议GPL-2.0/GPL-3.0Apache-2.0Apache-2.0Apache-2.0数据库MySQL
攻城狮悠扬·2023-09-23 20:07

spring boot 八、 sharding-jdbc 分库分表 按月分表

在项目resources目录下新建com.jianmu.config.sharding.DateShardingAlgorithm文件新增yaml配置数据源spring:shardingsphere:props
等一场春雨·2023-09-22 07:23

SpringBoot工程模板

：https://start.spring.io/4.0.0org.springframework.bootspring-boot-starter-parent2.7.15com.etoaktest-shardingsphere0.0.1
wsdhla·2023-09-21 23:31

从源码看ShardingSphere设计-路由引擎篇

无论是分库分表、还是读写分离，一个SQL在DB上执行前都需要经过特定规则运算获得运行的目标库表信息。路由引擎的职责定位就是计算SQL应该在哪个数据库、哪个表上执行。前者结果会传给后续执行引擎，然后根据其数据库标识获取对应的数据库连接；后者结果则会传给改写引擎在SQL执行前进行表名的改写，即替换为正确的物理表名。计算哪个数据库依据的算法是要用户配置的库路由规则，计算哪个表依据的算法是用户配置的表路由
蚊子squirrel·2023-09-21 23:44

负载均衡的跨驱动的解耦的连接池DataSource

如果想要用类似的功能，建议还是使用当当网的sharding-jdbc，赋上该官网https://shardingsphere.apache.org/document/current/cn/overview
彬_708c·2023-09-20 11:44

ShardingSphere-JDBC 分库分表

SpringCloud微服务系列文章，点击上方合集↑1.简介ShardingSphere是国产的、开源的、配置简单的分布式数据库解决方案。可以通过简单的配置实现分库分表和读写分离。
小虎哥的技术博客·2023-09-18 13:09

springboot整合ShardingSphere5.2.1（最新版）

内容包含分表配置文件类型和自定义类型两种方法无法直接上次代码，疯狂贴图configMyBaseMapperpackagecn.com.lyb.config;importcom.baomidou.mybatisplus.core.mapper.BaseMapper;importjava.util.List;publicinterfaceMyBaseMapperextendsBaseMapper{/*
日行一善，写一算法·2023-09-16 10:17

ShardingSphere UnknownDatabaseException: null

发现bug发现bug步骤如下考虑到为null，于是打个断点进去看看这里发现了我的数据库名，然后由于ShardingSphere使用的时候有一系列的规则比如不能使用关键字，容易报错等等，我就想到了是不是写
Kermit2023·2023-09-16 05:41

SpringCloud微服务实战——搭建企业级开发框架（二十七）：集成多数据源+Seata分布式事务+读写分离+分库分表

目前有多种方式实现读写分离，一种是Mycat这种数据库中间件，需要单独部署服务，通过配置来实现读写分离，不侵入到业务代码中；还有一种是dynamic-datasource/shardingsphere-jdbc
全栈程序猿·2023-09-15 14:05

springboot本机启动elasticjob抛出异常HostException(ip is null)

isReachable返回false（可能是使用无线网，导致ip验证问题）3.最后引入Groovy解决引入包org.codehaus.groovygroovy-all2.4.15代码加入启动类*屏蔽org.apache.shardingsphere.elasticjob.infra.env.IpUtils.getIp
顶子哥·2023-09-15 00:22

ShardingSphere 分库分表实战

一.简介sharding-sphere官网地址:https://shardingsphere.apache.org/ShardingSphere是一套开源的分布式数据库中间件解决方案组成的生态圈，它由Sharding-JDBC
七月_JulyFY·2023-09-14 18:21

【ShardingSphere】ShardingSphere 官网资源链接

文章目录官网主页文档中文文档DistSQL版本仓库下载源码GitHubZipCSDNGitCode二进制包ShardingSphere-JDBCTAR包ShardingSphere-ProxyShardingSphere-Agent
独上西楼影三人·2023-09-14 08:44

【ShardingSphere】单实例模式创建分片表、广播表、单表

文章目录1、简介2、ShardingSphere-Proxy默认行为2.1安装2.2启动3、设计测试环境3.1架构3.2数据映射关系4、准备工作4.1配置`server.yaml`4.2配置`config-logic_db.yaml
独上西楼影三人·2023-09-14 08:10

Sharding-Jdbc（1）：Sharding-Jdbc介绍

1Sharding-Jdbc介绍Sharding-Jdbc在3.0后改名为Shardingsphere它由Sharding-JDBC、Sharding-Proxy和Sharding-Sidecar（计划中
不死鸟.亚历山大.狼崽子·2023-09-14 00:38

Sharding-JDBC分库分表-自定义分片算法-4

默认分片算法ShardingJDBC通过org.apache.shardingsphere.sharding.spi.ShardingAlgorithm接口定义了数据分片算法，5.2.1版本默认提供了如下的分片算法配置标识自动分片算法详细说明类名
Alexon Xu·2023-09-13 00:53

Sharding-Jdbc 实现mysql的读写分离

本文转载于：https://mp.weixin.qq.com/s/gakwUKWB_WTqhMS2cMo_jw概览ShardingSphere-Jdbc定位为轻量级Java框架，在Java的Jdbc层提供的额外服务
G__yuan·2023-09-11 09:54

ShardingSphere分库分表（一）：高性能架构模式

互联网业务兴起之后，海量用户加上海量数据的特点，单个数据库服务器已经难以满足业务需要，必须考虑数据库集群的方式来提升性能。高性能数据库集群的第一种方式是“读写分离”，第二种方式是“数据库分片”。文章目录1、读写分离架构2、数据库分片架构2.1、垂直分片2.2、水平分片3、读写分离和数据分片架构4、实现方式4.1、程序代码封装4.2、中间件封装4.3、常用解决方案1、读写分离架构**读写分离原理：*
鹤冲天Pro·2023-09-10 15:18

SpringBoot: spring boot+MyBatis+ShardingSphere实现分表分库

一。准备3个数据库(ds0,ds1,ds2)，其中ds0和ds1用来存储分表分库的数据，ds2用来存储不进行分表分库的数据.在ds0和ds1数据库分别建立3张数据表createtabletab_user2(idintauto_incrementprimarykey,namevarchar(5),gendervarchar(5),ageint);createtabletab_user1(idinta
amadeus_liu2·2023-09-10 14:16
上一页 1 2 3 4 5 6 7 8 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他