E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
分表分库
今天面试总结:INSERT并发过大导致锁表问题解决
今天去面试被这个问题问挂啦,一开始真没听懂他说的啥,本来想用
分表分库
这种高大上的东西忽悠一下,后来还是说不知道就走人,现总结下如何解决这个问题:1.临时方案1:查看锁表情况并处理锁表/**locked*
ahua186186
·
2015-08-01 16:00
面试
insert
并发
今天面试总结:INSERT并发过大导致锁表问题解决
今天去面试被这个问题问挂啦,一开始真没听懂他说的啥,本来想用
分表分库
这种高大上的东西忽悠一下,后来还是说不知道就走人,现总结下如何解决这个问题:1.临时方案1:查看锁表情况并处理锁表 /* *locked
ahua186186
·
2015-08-01 08:00
面试
总结
insert
mysql
分表分库
单库单表单库单表是最常见的数据库设计,例如,有一张用户(user)表放在数据库db中,所有的用户都可以在db库中的user表中查到。单库多表随着用户数量的增加,user表的数据量会越来越大,当数据量达到一定程度的时候对user表的查询会渐渐的变慢,从而影响整个DB的性能。如果使用mysql,还有一个更严重的问题是,当需要添加一列的时候,mysql会锁表,期间所有的读写操作只能等待。可以通过某种方式
awen7916
·
2015-06-29 15:00
mysql
mysql
分表分库
单库单表 单库单表是最常见的数据库设计,例如,有一张用户(user)表放在数据库db中,所有的用户都可以在db库中的user表中查到。 单库多表 随着用户数量的增加,user表的数据量会越来越大,当数据量达到一定程度的时候对user表的查询会渐渐的变慢,从而影响整个DB的性能。如果使用mysql, 还有一个更严重的问题是,当需要添加一列的时候,mysql会锁表,期间所有的读写操作只能等待。 可以通
awen7916
·
2015-06-29 15:00
mysql
web集中式高并发架构设计
+zookeeper的分布式服务设计,mq等等,但目前项目处于初步期,还没上线,不能预估用户数量以及将来的并发数量,所以为了节约成本(老板吝啬),快速上线项目,我们项目依旧处于集中式,没有分模块,没有
分表分库
zhifeng687
·
2015-06-21 15:18
分布式
在mysql数据库中制作千万级测试表
前言:最近准备深入的学一下mysql,包括各种引擎的特性、性能优化、
分表分库
等。为了方便测试性能、分表等工作,就需要先建立一张比较大的数据表。我这里准备先建一张千万记录用户表。
metecyu
·
2015-01-28 16:00
mongodb架构mongodb分片集群与简易搭建方案---ttlsa教程系列之mongodb
往往就会根据业务对大表大数据库进行
分表分库
操作,MySQL分表操作参见http://www.ttlsa.com/html/1757.html,人为的按照某种协
yelang_110
·
2014-09-01 16:00
高并发数据库
分表分库
大表分表后每个表的结构相同,跨表查询时可以用sql的union比如a,b表结构相同可以通过union来联接select*fromaunionallselect*frombwhere。。。。但是这样性能比较低,所有的表都要查询;
caomiao2006
·
2014-08-15 01:10
数据库
高并发数据库
分表分库
大表分表后每个表的结构相同,跨表查询时可以用sql的union比如a,b表结构相同可以通过union来联接select*fromaunionallselect*frombwhere。。。。但是这样性能比较低,所有的表都要查询;
caomiao2006
·
2014-08-15 01:00
关于论坛数据库的设计(
分表分库
等-转)
关于论坛数据库的设计文章分类:数据库一个简单的论坛系统1:包含下列信息:2:每天论坛访问量300万左右,更新帖子10万左右。请给出数据库表结构设计,并结合范式简要说明设计思路。一.发帖主题和回复信息存放在一张表,并在这个表中增加user_name字段对数据库的操作而言,检索数据的性能基本不会对数据造成很大的影响(精确查找的情况下),而对表与表之间的连接却会产生巨大的影响,特别在有巨量数据的表之间;
zhanjianshinian
·
2014-07-28 23:00
数据库
集群
分布式
缓存
结构
mongodb架构mongodb分片集群与简易…
往往就会根据业务对大表大数据库进行
分表分库
操作,MySQL分表操作参见http://www.ttlsa.com/html/1757.html,人为的按照某种协
yelang_110
·
2014-07-25 16:00
summercool-hsf(基于Netty实现的RPC框架,已经应用国内某移动互联网公司)
Web框架,已经应用于某国内大型网络公司的等重要应用)、summercool-hsf(基于Netty实现的RPC框架,已经应用国内某移动互联网公司)、summercool-ddl(基于Mybaits的
分表分库
框架
干死it
·
2014-07-23 14:00
rpc
netty
ibatis分库分表
mongodb架构mongodb分片集群与简易搭建方案---ttlsa教程系列之mongodb
往往就会根据业务对大表大数据库进行
分表分库
操作,MySQL分表操作参见http://www.ttlsa.com/html/1757.html,人为的按照某种协
286090326
·
2014-07-04 16:02
mongodb
linux
安装
mongodb架构mongodb分片集群与简易搭建方案---ttlsa教程系列之mongodb
往往就会根据业务对大表大数据库进行
分表分库
操作,MySQL分表操作参见http://www.ttlsa.com/html/1757.html,人为的按照某种协
286090326
·
2014-07-04 16:02
安装
linux
mongodb
mongodb
XCode v8.11 重量级
分表分库
(无视海量数据)
XCode天生就有
分表分库
功能,设计于2005年!历时9年,这是
分表分库
功能第一次针对性正式更新。
大石头
·
2014-06-16 05:00
孙立:去哪儿网Java生态环境演进之路
将近十年的互联网从业经验和程序开发,对高并发,大数据量网站系统架构优化,高可用性,可伸缩性,分布式系统缓存,数据库
分表分库
(sharding),大型复杂系统重构等有丰富的经验,并且对运维监控和自动化运维控制有经验
郭蕾
·
2014-06-12 00:00
关于论坛数据库的设计(
分表分库
等-转)
关于论坛数据库的设计文章分类:数据库一个简单的论坛系统1:包含下列信息:2:每天论坛访问量300万左右,更新帖子10万左右。请给出数据库表结构设计,并结合范式简要说明设计思路。一.发帖主题和回复信息存放在一张表,并在这个表中增加user_name字段对数据库的操作而言,检索数据的性能基本不会对数据造成很大的影响(精确查找的情况下),而对表与表之间的连接却会产生巨大的影响,特别在有巨量数据的表之间;
ynztpwl
·
2014-05-13 11:00
几个Web server的HA架构资料
Web性能,最关键还是要看瓶颈在哪里.手段不外乎下面几个.实现从易到难一般为:优化BigSQL->引入Memcache等缓存->Web负载平衡(多加Web服务器)->引入CDN->数据库读写分离->数据库
分表分库
当然
harrychinese
·
2014-05-07 17:00
大数据存储之
分表分库
随着访问量和数据量的增长,即使一台单机能服务高达几个TB的数据、提供几万QPS的服务能力,也不足以满足大型系统的需求,便要开始实现
分表分库
。
czp11210
·
2014-04-24 18:59
数据库技术
大数据存储之
分表分库
随着访问量和数据量的增长,即使一台单机能服务高达几个TB的数据、提供几万QPS的服务能力,也不足以满足大型系统的需求,便要开始实现
分表分库
。
czp11210
·
2014-04-24 18:00
关于高并发的优化处理
关于高并发的优化处理1、数据库 分区
分表分库
(数据路由开销),读写分离(主从数据库同步开销)2、后台系统 负载均衡——静态映射hash表(对不够灵活),后端服务器从分类者上取任务3、异步批量处理
kanlianhui
·
2014-04-16 14:00
分库分表最佳实践大小结
分库分表最佳实践大小结一、随着企业业务的增长,访问量和用户等数据的增加,传统的关系数据库已经不能满足需求,
分表分库
就成了节省成本、和良好扩展性的必然选择,网上也有很多开源的
分表分库
的软件,也公司自己开发实现而终其原理和步骤都无外乎三步
myeclipse_bj
·
2014-04-15 13:00
最佳实践
大小
分库分表最佳实践大小结
分库分表最佳实践大小结 一、随着企业业务的增长,访问量和用户等数据的增加,传统的关系数据库已经不能满足需求,
分表分库
就成了节省成本、和良好扩展性的必然选择,网上也有很多开源的
分表分库
的软件,也公司自己开发实现
myeclipse_bj
·
2014-04-15 13:00
分库分表最佳实践大小结
数据库的防单点故障和
分表分库
数据库的防单点故障和
分表分库
通常数据库是安装在一台服务器上,如果服务器DOWN机,则数据服务停止。这样在生产环境是不合适的,必须部署两台以上的服务器且都安装有相同数据的数据库。
paulwong
·
2014-03-23 21:00
mongodb架构mongodb分片集群与简易搭建方案---ttlsa教程系列之mongodb(六)
往往就会根据业务对大表大数据库进行
分表分库
操作,MySQL分表操作参见http://www.ttlsa.com/html/1757.html,人为的按照某种协
小运
·
2014-03-23 01:00
mongodb
cluster
sharding
纯Java的高性能长连接RPC解决方案
简介:轻量封装Ibatis3 因为本人在国内最大的电子商务公司工作期间,深感一个好的
分表分库
框架可以大大提高系统的承载能力及系统的灵活性,而一个不好的
分表分库
方案,则让系统在大数据量处理的时候非常郁闷
wbj0110
·
2013-11-22 09:00
rpc
通信
TCP/IP
纯Java的高性能长连接RPC解决方案
简介:轻量封装Ibatis3 因为本人在国内最大的电子商务公司工作期间,深感一个好的
分表分库
框架可以大大提高系统的承载能力及系统的灵活性,而一个不好的
分表分库
方案,则让系统在大数据量处理的时候非常郁闷
wbj0110
·
2013-11-22 09:00
rpc
通信
TCP/IP
纯Java的高性能长连接RPC解决方案
简介:轻量封装Ibatis3 因为本人在国内最大的电子商务公司工作期间,深感一个好的
分表分库
框架可以大大提高系统的承载能力及系统的灵活性,而一个不好的
分表分库
方案,则让系统在大数据量处理的时候非常郁闷
wbj0110
·
2013-11-22 09:00
rpc
通信
TCP/IP
数据库水平切分的实现原理解析---分库,分表,主从,集群,负载均衡器
本问是我在网上看到的一篇有关
分表分库
的文章,感觉对概念讲的都非常清晰。
Sky___Ice
·
2013-09-22 10:00
数据库
优化
分库分表
Rails_ActiveRecord_
分表分库
_方法搜集
最好的方式是对程序是透明的,程序猿们不用关心背后的存储细节问题,比如是分表了还是分库了。 分表1 Deal.table_name = "deals_100" deal = Deal.new deal.price = xxx deal.save 上面写法如果效率比较低的话(诱发底层的很多验证和表的meta数据获取),这样
fantaxy025025
·
2013-06-17 11:00
ActiveRecord
Rails_ActiveRecord_
分表分库
_方法搜集
最好的方式是对程序是透明的,程序猿们不用关心背后的存储细节问题,比如是分表了还是分库了。 分表1 Deal.table_name = "deals_100" deal = Deal.new deal.price = xxx deal.save 上面写法如果效率比较低的话(诱发底层的很多验证和表的meta数据获取),这样
fantaxy025025
·
2013-06-17 11:00
ActiveRecord
Ibatis之
分表分库
解决方案
对于一些大数据量的应用,但也没有采用Hbase等大数据NoSql或者说不具有使用Hbase的场景,比如要求高可靠性,高一直性等,采用MySql数据库的话,如果单表数据量比较大的时候,分库分表还是应用地比较多的,下面的案例也是摘自别人的文章,干货还是比较多的,有兴趣的同学可以下载下来慢慢研究,个人觉得方案还是比较好,但还不够简单。作者博客链接:http://dragonsoar.iteye.com/
caoruntie
·
2013-04-11 13:17
软编码
架构
Ibatis之
分表分库
解决方案
对于一些大数据量的应用,但也没有采用Hbase等大数据NoSql或者说不具有使用Hbase的场景,比如要求高可靠性,高一直性等,采用MySql数据库的话,如果单表数据量比较大的时候,分库分表还是应用地比较多的,下面的案例也是摘自别人的文章,干货还是比较多的,有兴趣的同学可以下载下来慢慢研究,个人觉得方案还是比较好,但还不够简单。 &
xylong
·
2013-04-11 13:00
ibatis
纯Java的高性能长连接RPC解决方案
简介:轻量封装Ibatis3因为本人在国内最大的电子商务公司工作期间,深感一个好的
分表分库
框架可以大大提高系统的承载能力及系统的灵活性,而一个不好的
分表分库
方案,则让系统在大数据量处理的时候非常郁闷。
简道
·
2013-01-14 12:44
Spring
Netty
长连接
管理
纯Java的高性能长连接RPC解决方案
简介:轻量封装Ibatis3 因为本人在国内最大的电子商务公司工作期间,深感一个好的
分表分库
框架可以大大提高系统的承载能力及系统的灵活性,而一个不好的
分表分库
方案,则让系统在大数据量处理的时候非常郁闷
dragonsoar
·
2013-01-14 12:00
java
summercool-ddl框架简介 (二)
简介:轻量封装Ibatis3因为本人在国内最大的电子商务公司工作期间,深感一个好的
分表分库
框架可以大大提高系统的承载能力及系统的灵活性,而一个不好的
分表分库
方案,则让系统在大数据量处理的时候非常郁闷。
简道
·
2013-01-13 21:35
Web
Spring
管理
Hibernate
Ibatis3
summercool-ddl框架简介 (二)
简介:轻量封装Ibatis3 因为本人在国内最大的电子商务公司工作期间,深感一个好的
分表分库
框架可以大大提高系统的承载能力及系统的灵活性
dragonsoar
·
2013-01-13 21:00
DDL
summercool-ddl框架简介 (一)
简介:轻量封装Ibatis3 因为本人在国内最大的电子商务公司工作期间,深感一个好的
分表分库
框架可以大大提高系统的承载能力及系统的灵活性,而一个不好的
分表分库
方案,则让系统在大数据量处理的时候非常郁闷
dragonsoar
·
2012-12-11 23:00
spring
框架
互联网
ibatis
聊聊大数据环境下的数据库架构
因此mysql
分表分库
+memcache+redis也不失是一个完美解决方案。 由于redis不支持复杂查询,redis的读取性能还是赶不上mem这些劣势,因此才需要一些搭挡。
iwebcode
·
2012-10-15 19:00
数据库
数据库分库实现
随着互联网数据越来越庞大,传统的单库单表难以实现大数据量的存储,所以出现了数据库
分表分库
等一系列方案,今天就带来分库方面的一些知识点 1.分库原则:数据库分库有很多分库依据,以下是分库几种实现  
weilingfeng98
·
2012-06-10 22:00
mysql
完美的
分表分库
方案还未实现
我在使用jsqlparser解析sql,然后通过解析进行命名转换,做一些orm映射、
分表分库
功能 http://jsqlparser.sourceforge.net/ 之前写了一部分
aa87963014
·
2012-05-05 01:00
实现
spring+mybatis利用interceptor(plugin)实现数据库读写分离
最近在研究数据库读写分离,
分表分库
的一些东西。其实这个问题好早之前就想好,只是以前使用hibernate,难点是不好判断什么样的sql走读库,什么样的sql走主库?
xiaoZ5919
·
2012-04-24 22:00
spring
mybatis
读写分离
spring+mybatis利用interceptor(plugin)实现数据库读写分离
最近在研究数据库读写分离,
分表分库
的一些东西。其实这个问题好早之前就想好,只是以前使用hibernate,难点是不好判断什么样的sql走读库,什么样的sql走主库?
xiaoZ5919
·
2012-04-24 22:00
spring+mybatis利用interceptor(plugin)实现数据库读写分离
最近在研究数据库读写分离,
分表分库
的一些东西。其实这个问题好早之前就想好,只是以前使用hibernate,难点是不好判断什么样的sql走读库,什么样的sql走主库?
xiaoZ5919
·
2012-04-24 22:00
spring+mybatis利用interceptor(plugin)实现数据库读写分离
最近在研究数据库读写分离,
分表分库
的一些东西。其实这个问题好早之前就想好,只是以前使用hibernate,难点是不好判断什么样的sql走读库,什么样的sql走主库?
xiaoZ5919
·
2012-04-24 22:00
spring+mybatis利用interceptor(plugin)实现数据库读写分离
最近在研究数据库读写分离,
分表分库
的一些东西。其实这个问题好早之前就想好,只是以前使用hibernate,难点是不好判断什么样的sql走读库,什么样的sql走主库?
xiaoZ5919
·
2012-04-24 22:00
YII view 常用extensions
exbreadcrumbs CGridView总计插件 http://www.yiiframework.com/extension/gridcolumns/ YORM是一款Yii的第三方ORM插件
分表分库
hudeyong926
·
2012-03-07 09:00
view
答复: 大型Java多用户商城系统设计开发的心得和困难
但做到后期,
分表分库
,集群,不同类型数据库混用阶段,Hibernate是重构的第一大障碍。而且这个阶段还涉及到人员的素质问题
onecan
·
2012-01-04 13:00
答复: 大型Java多用户商城系统设计开发的心得和困难
但做到后期,
分表分库
,集群,不同类型数据库混用阶段,Hibernate是重构的第一大障碍。而且这个阶段还涉及到人员的素质问题
onecan
·
2012-01-04 13:00
Yii 读写分离
分表分库
实现一主一从,一主多从,多主多从的读写分离 。支持DAO,AR,其中Query builder只完成部分,需完善 调用 //AR class User extends ActiveRecord { public $useDbName= 'passport'; //$this->dbWrite(); } //$connection = $model->getDbCo
hudeyong926
·
2011-12-09 15:00
读写分离
上一页
5
6
7
8
9
10
11
12
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他