server sql 水平分表_drds 创建分表

DRDS异构索引测试

一、

概述

对于DRDS的数据库的分表，查询时SQL中的where条件尽量会带上分库分表键，这样DRDS会将这个查询路由到具体的分库中，以提高查询效率。如果SQL的where条件中没有分库分表键，DRDS会进行一次全表扫描。针对这种场景，DRDS提供了异构索引来解决这个问题。异构索引会将源表...

文章

戴少

2017-09-18

6884浏览量

分布式关系型数据库服务DRDS产品信息汇总

一、重要文档

Help文档：

https://help.aliyun.com/document_detail/50067.html?spm=5176.7947010.779804.ee.2cb734f4QtWXqx

二、技术架构

1、产品概述

分布式关系型数据库服务(Distributed

Rel...

文章

正博

2018-03-08

14451浏览量

【阿里云 MVP 月度分享】DRDS分布式数据库的CRUD调优指南

优化的核心原则

由于 DRDS 是一个分布式关系数据库服务，处理的是分布式关系运算。分布式无疑会带来额外的跨库网络开销，而大家都知道，网络通信的延迟比单机内通信的延迟大得多。因此分布式环境中优化更应侧重考虑：

减少网络传输；

减少 DRDS 计算量，尽量将计算下推到下层的数据节点上，让计算在数据...

文章

擎天xm

2018-01-05

4338浏览量

万券齐发助力企业上云，爆款产品低至2.2折起！

限量神券最高减1000，抢完即止！云服务器ECS新用户首购低至0.95折！

广告

浙江移动首个基于阿里云技术的生产应用上线成功

一、项目背景

为落实公司“十三五”战略，建立“架构先进、运营高效、内外兼顾”的IT体系, 浙江移动近日受总部信息技术中心委托和指导，探索传统企业与互联网公司新型合作模式，跟踪行业发展态势，开展新技术、新产品研究和创新，在集团内首次携手亚洲最大的云计算公司——阿里云，在“可监可管可运维”基础上，开展...

文章

阿里云头条

2018-05-11

12611浏览量

数据库分布式架构巧设计，水平拆分不再难

在阿里云生态日，袋鼠云首席数据库架构师赵晓宏分享了《高容量大并发数据库服务——数据库分布式架构设计》。他从分布式需求、拆分原则、拆分难点及解决方案、数据库规范设计、运维相关五个方面进行了分享。在分享中，他主要介绍了水平拆分的原则以及解决方案，分享了DRDS的架构与实践。

以下内容根据直播视频整...

文章

场景研读

2017-06-16

14719浏览量

一个SQL无法kill掉的案例

一个SQL无法kill掉的案例

问题描述

因为业务需要，客户有一个ddl需求扩展某一drds单表的列的长度，但是在drds上执行ddl的时候被一个select阻塞mdl(metadata lock)锁，详情见官方文档8.11.4 Metadata Locking。报错以及SQL如下：这样的SQL是...

文章

化雨u

2019-04-19

876浏览量

传统应用层逻辑分库DB迁移阿里云DRDS+RDS分布式数据库

随着互联网快速发展，我们的结构化关系数据库在高并发、海量数据的情况下面临单机扩展性问题，首先是单机数据库容量瓶颈，单机数据库在业务高速增长的情况下依赖硬件升级也会到达天花板，并且使用成本变得非常高，而且扩展性的复杂性也是比较高，传统数据库扩容往往意味着服务中断，很难做到业务无感知或者少感知。

...

文章

马柯

2017-09-19

10404浏览量

分布式关系型数据库服务 DRDS 支持全局二级索引，可完成多维字段拆分

信息摘要： DRDS 支持全局二级索引，提供全局二级索引，全局唯一索引的创建、查看，可完成多维字段拆分适用客户： 数据库使用者 / 分布式数据库使用者 / 分库分表 / 开发者 / 互联网企业 / 金融保险行业 / 新零售行业版本/规格功能： 新功能：

新增支持创建全局二级索引、创建全局唯一索引...

文章

寒离

2019-11-01

718浏览量

云栖干货回顾 |“顶级玩家”集结！分布式数据库专场精华解读

本专场是阿里云分布式数据库的年度盛会，多位阿里云分布式数据库领域核心专家以及业界专家进行了专题演讲，内容涵盖分布式 POLARDB(DRDS)、AnalyticDB、OceanBase 多款云上核心分布式数据库产品，涉猎分布式 SQL 引擎、分布式存储引擎、分布式事务等多个方向。

从 DRDS 到...

文章

Roin123

2019-10-12

5342浏览量

阿里云分布式关系型数据库服务 DRDS

产品简介

DRDS 是一款基于 RDS for MySQL 、采用分库分表技术进行扩展的分布式 OLTP 数据库服务产品，产品目标旨在提升数据存储容量、并发吞吐、复杂计算效率三个方面的扩展性需求。

DRDS 核心能力采用标准关系型数据库技术实现，构建与公共云( cloud native )，配合完...

文章

萝卜説

2019-06-08

2765浏览量

阿里云DRDS--MySQL中间件总结分享

1.前言

mysql作为互联网公司都会用到的数据库，如果在使用过程中出现性能问题，会采用mysql的横向扩展，使用主从复制来提高读性能，要是解决写入问题，需要进行分库分表。本文不会去介绍mysql的高可用，本文主要介绍mysql的访问中间件(DAL)的一些实现方案。

2.Atlas

官网：http...

文章

Lionelcox

2019-12-13

382浏览量

某传统企业去O上云案例

最近参与到某新能源制造企业去O上云的项目，网站的需求很简单：以WEB/APP 的形式提供数据查询展示、分析的功能。 网站使用java编写，数据库采用Oracle DataGuard 搭建的高可用架构。DG环境是找第三方公司来搭建的，过了维保期之后主库出了问题，客户根据维保手册自行将备库提升为主库...

文章

笱局长

2017-09-30

5122浏览量

DRDS和RDS只读实例性能对比测试

作者：回雁

我们都知道，对于数据库中基础信息表来说，它的数据变化频率低，数据量小，但由于基础数据本身的特点，大多数相关系统都会对频繁地读取它。即便我们通过对数据调取服务进行服务化包装，通过HSF服务的方式对外暴露，以减少多个系统直接操作数据库带来的问题，但数据本身的读取频率和并发度都非常高，QPS...

文章

技术课堂的搬运工~

2020-04-03

98浏览量

阿里巴巴开源项目: 阿里巴巴去Oracle数据迁移同步工具

背景

08年左右，阿里巴巴开始尝试MySQL的相关研究，并开发了基于MySQL分库分表技术的相关产品，Cobar/TDDL(目前为阿里云DRDS产品)，解决了单机Oracle无法满足的扩展性问题，当时也掀起一股去IOE项目的浪潮，愚公这项目因此而诞生，其要解决的目标就是帮助用户完成从Orac...

文章

愤怒的苹果

2016-03-29

4951浏览量

DRDS和RDS只读实例性能对比测试

我们都知道，对于数据库中基础信息表来说，它的数据变化频率低，数据量小，但由于基础数据本身的特点，大多数相关系统都会对频繁地读取它。即便我们通过对数据调取服务进行服务化包装，通过HSF服务的方式对外暴露，以减少多个系统直接操作数据库带来的问题，但数据本身的读取频率和并发度都非常高，QPS可以...

文章

回雁

2018-05-10

3214浏览量

DRDS和RDS只读实例性能对比测试

我们都知道，对于数据库中基础信息表来说，它的数据变化频率低，数据量小，但由于基础数据本身的特点，大多数相关系统都会对频繁地读取它。即便我们通过对数据调取服务进行服务化包装，通过HSF服务的方式对外暴露，以减少多个系统直接操作数据库带来的问题，但数据本身的读取频率和并发度都非常高，QPS可以...

文章

回雁

2018-08-10

1471浏览量

数据管理 DMS数据导出步骤及使用小窍门

云栖号快速入门：【点击查看更多云产品快速入门】不知道怎么入门？这里分分钟解决新手入门等基础问题，可快速完成产品配置操作！

需求背景

在SQLConsole窗口查询的数据，出于前端性能及数据安全性上考虑会限制单次返回的总的记录行数；此时需要分析大量数据或者将相关数据提取出来进行运营等活动时，需要使用...

文章

小生生

2020-07-01

219浏览量

“移山”法宝~阿里数据库迁移项目yugong(愚公)开源啦！【内有详解】

项目简介

yugong(意译：愚公)项目是阿里的开源项目，该项目使用纯Java开发，主要作用是进行数据库迁移，目前该项目主要支持从oracle数据库向Mysql和DRDS数据库进行迁移。

项目背景

08年左右，阿里巴巴开始尝试MySQL的相关研究，并开发了基于MySQL分库分表技术的相关产品，C...

文章

阿里云头条

2016-03-11

15698浏览量

Oracle Sharding

一直以来在关系型数据库当中，MySQL的分库分表被所有企业认可，并广泛的应用于互联网行业及各大电商平台，数据库的中间件产品也是满目狼藉，如代表，官方的MySQL Proxy、商用的有阿里DRDS、开源的有MyCAT、Altas等等。

自从Oracle 12.2发布之后，Oracle数据库也可以实现...

文章

javenzhen

2017-07-25

2176浏览量

DRDS只读实例的性能测试------基础总结篇

关于MySQLslap压测工具----MySQL自带的也测工具

官方文档解释：

http://dev.mysql.com/doc/refman/5.1/en/mysqlslap.html

mysqlslap — Load Emulation Client

mysqlslap is ...

文章

化雨u

2017-12-25

1727浏览量

巧用RDS全家桶搭建亿级新闻源仓库

我们的业务，有一个实时新闻源库，初始大概有3000万数据，现在大概有上亿条数据了，我们在起初的处理方式比较简单粗暴，直接购买了3台8核16G的SSD版本的ECS，组成了一主双从的机组，从库只读。

业务是单库，但是具体的内容是分表的，比如：

article_content_0...

文章

ace.qi

2018-06-27

1496浏览量

云栖PPT下载 | 开源界大咖集体现身，开源数据库专场重点再回眸！

阿里云开源数据库项目最新发布

阿里巴巴集团副总裁、阿里云智能数据库事业部总裁、高级研究员李飞飞(飞刀)、阿里云数据库资深技术专家楼方鑫(黄忠)以及阿里云数据库技术专家傅宇(齐木)三位阿里云技术专家为大家介绍了最新的阿里云开源数据库项目。

李飞飞：

数据库在过去这么多年，尤其近几年发展如此迅速的核心...

文章

Roin123

2019-10-17

1916浏览量

DRDS到MaxCompute(原ODPS)数据归档性能优化测试

一、cdp同步基本原理数据集成(Data Integration)是阿里巴巴集团提供的数据同步平台。该平台具备可跨异构数据存储系统、可靠、安全、低成本、可弹性扩展等特点，可为 20 多种数据源提供不同网络环境下的离线(全量/增量)数据进出通道。数据源类型的详情请参见 支持数据源类型。数据集成的原理...

文章

化雨u

2018-04-02

1455浏览量

DRDS到MaxCompute(原ODPS)数据归档性能优化测试

一、cdp同步基本原理

数据集成(Data Integration)是阿里巴巴集团提供的数据同步平台。该平台具备可跨异构数据存储系统、可靠、安全、低成本、可弹性扩展等特点，可为 20 多种数据源提供不同网络环境下的离线(全量/增量)数据进出通道。数据源类型的详情请参见 支持数据源类型。

数据集成的...

文章

隐林

2018-04-14

2237浏览量

深度 | 实时历史数据库存储成本惊人，怎么破？

作者：胡刀 阿里云运维专家/ 舟济 阿里云解决方案架构师

实时历史库需求背景

在当今的数字化时代，随着业务的迅速发展，每天产生的数据量会是一个惊人的数量，数据库存储的成本将会越来越大，通常的做法是对历史数据做归档，即将长期不使用的数据迁移至以文件形式存储的廉价存储设备上，比如阿里云OSS或者阿里云...

文章

skin778

2020-06-19

254浏览量

基于X-Engine引擎的实时历史数据库解决方案揭秘

实时历史库需求背景

在当今的数字化时代，随着业务的迅速发展，每天产生的数据量会是一个惊人的数量，数据库存储的成本将会越来越大，通常的做法是对历史数据做归档，即将长期不使用的数据迁移至以文件形式存储的廉价存储设备上，比如阿里云OSS或者阿里云数据库DBS服务。

然而在部分核心业务的应用场景下，针对几...

文章

skin778

2020-05-22

390浏览量

21世纪了还愚公移山？数据库这么迁移更稳定！

背景

在系统的快速迭代过程中，业务系统往往部署在同一个物理库，没有做核心数据和非核心数据的物理隔离。随着数据量的扩大这种情况会带来稳定性的风险，如库的慢sql，磁盘，IO等等都会相互整体影响，从而影响核心系统的业务稳定性，因此需要将核心业务的业务表从原有库里抽取出来，单独到新库里。而核心数据的迁移...

文章

技术小能手

2019-03-14

10293浏览量

《企业迁云实战》——3.3　应用架构设计

3.3　应用架构设计

上面已经介绍了用户业务上云时如何进行网络设计、运维管理环境规划，本章将重点介绍如何基于阿里云产品和服务设计应用系统架构。3.3.1　负载均衡阿里云负载均衡(Server Load Balancer，SLB)是将访问流量根据转发策略分发到后端多台ECS的流量分发控制服务。用户可...

文章

华章计算机

2017-09-04

3007浏览量

【阿里云 MVP 分享】POLARDB for MySQL 版评测及同类横向对比

前言

在数据库的选择上, MySQL成为中国开发者的最爱。相比 SQL Server相对保守的数据库特点,中国开发者更喜欢开放性的数据库,同时又考虑到价格问题,那么 Oracle不菲的价格也挡住了很大一批开发者。由于开源、价格等因素,在数据库选择上,要么是低价、开源的 MySQL,要么就是高大上的...

文章

妙正灰

2018-09-05

3418浏览量

一篇文章读懂阿里云企业级数据库最佳实践

今天阿里数据库不再是简单的电商业务，而是涵盖了视频娱乐、IM、地图、在线零售、新零售、物流、在线旅游、音乐、IoT等纵多领域。2017年双十一交易额达1682亿，数据库交易峰值也以数十倍的速度在增长。超大规模的业务压力，在阿里巴巴内部淬炼出了一套完整的企业数据库解决方案：超大数据分库分表技术、毫秒...

文章

小二辛苑

2017-12-19

3799浏览量