豆瓣网CTO洪强宁讲述网站架构变迁

豆瓣网CTO洪强宁讲述网站架构变迁

罗马不是一天建成的,豆瓣的技术架构也是随着用户规模的增长一直在持续变化中。洪强宁,2002年毕业于清华大学,现任北京豆瓣互动科技有限公司首席架构师。洪强宁和他带领的技术团队致力于用技术改善人们的文化和生活品质,在网站架构、性能、可伸缩性上进行深入研究。豆瓣网曾获软件中国2006年度最佳技术应用网站。

  豆瓣网CTO洪强宁讲述网站架构变迁_第1张图片

豆瓣网CTO洪强宁讲述网站架构变迁_第2张图片

豆瓣网CTO洪强宁讲述网站架构变迁_第3张图片

豆瓣网CTO洪强宁讲述网站架构变迁_第4张图片

豆瓣网CTO洪强宁讲述网站架构变迁_第5张图片

豆瓣网CTO洪强宁讲述网站架构变迁_第6张图片

豆瓣网CTO洪强宁讲述网站架构变迁_第7张图片

豆瓣网CTO洪强宁讲述网站架构变迁_第8张图片

豆瓣网CTO洪强宁讲述网站架构变迁_第9张图片

豆瓣网CTO洪强宁讲述网站架构变迁_第10张图片

豆瓣网CTO洪强宁讲述网站架构变迁_第11张图片

豆瓣网CTO洪强宁讲述网站架构变迁_第12张图片

豆瓣网CTO洪强宁讲述网站架构变迁_第13张图片

豆瓣网CTO洪强宁讲述网站架构变迁_第14张图片

豆瓣网CTO洪强宁讲述网站架构变迁_第15张图片

豆瓣网CTO洪强宁讲述网站架构变迁_第16张图片

豆瓣网CTO洪强宁讲述网站架构变迁_第17张图片

豆瓣网CTO洪强宁讲述网站架构变迁_第18张图片

豆瓣网CTO洪强宁讲述网站架构变迁_第19张图片

豆瓣网CTO洪强宁讲述网站架构变迁_第20张图片

豆瓣网CTO洪强宁讲述网站架构变迁_第21张图片

豆瓣网CTO洪强宁讲述网站架构变迁_第22张图片

豆瓣网CTO洪强宁讲述网站架构变迁_第23张图片

豆瓣网CTO洪强宁讲述网站架构变迁_第24张图片

豆瓣网CTO洪强宁讲述网站架构变迁_第25张图片

豆瓣网CTO洪强宁讲述网站架构变迁_第26张图片

豆瓣网CTO洪强宁讲述网站架构变迁_第27张图片

豆瓣网CTO洪强宁讲述网站架构变迁_第28张图片

豆瓣网CTO洪强宁讲述网站架构变迁_第29张图片

豆瓣网CTO洪强宁讲述网站架构变迁_第30张图片

豆瓣网CTO洪强宁讲述网站架构变迁_第31张图片

豆瓣网CTO洪强宁讲述网站架构变迁_第32张图片

豆瓣网CTO洪强宁讲述网站架构变迁_第33张图片

豆瓣网CTO洪强宁讲述网站架构变迁_第34张图片

豆瓣网CTO洪强宁讲述网站架构变迁_第35张图片

豆瓣网CTO洪强宁讲述网站架构变迁_第36张图片

豆瓣网CTO洪强宁讲述网站架构变迁_第37张图片

豆瓣网CTO洪强宁讲述网站架构变迁_第38张图片

豆瓣网CTO洪强宁讲述网站架构变迁_第39张图片

豆瓣网CTO洪强宁讲述网站架构变迁_第40张图片

豆瓣网CTO洪强宁讲述网站架构变迁_第41张图片

豆瓣网CTO洪强宁讲述网站架构变迁_第42张图片

豆瓣网CTO洪强宁讲述网站架构变迁_第43张图片

校内网CTO黄晶讲述网站架构变迁

每个网站的发展都会按照一个大致相同的路线去完成,当然这里说的是每个相对成功的网站。

第一阶段:

这一阶段没有太大的访问量,甚至只有一台服务器就搞定了所有的访问。DB和前端的代码全都在一起,压力不高。忆者注:我觉得在alexa没进五万的时候,只要不是特殊的应用,基本都在此列吧。

第二阶段:

网站初具规模,DB压力大增,单独的一台DB已经满足不了现在的访问量,开始考虑读写分离的Master-slave库,使用三个及以上的服务器。忆者注:这时网站的alexa基本上会在1-3万的位置,每天的ip在5-10w的样子,当然,DB我们都认为是MySql。

第三阶段:

访问量继续增加,增加到了DB的压力在Master的机器上非常的明显了,Master开始出现吃不消的情况,出现写耗尽。主从也已经不能满足要求,需要进一步解决负载问题,此时要引入Mysql Proxy程序,进行中间层代理,实现负载均衡,易于扩展。忆者注:这时网站已经不可限量了,先恭喜下你的网站能用到这段。

第四阶段:

网站继续发展,进而出现了数据量的成倍增长,原来的N台DB都出现了一个问题,数据量巨大,无法完成正常速度的读写。此时,需要对网站按功能进行垂直划分,比如用户注册登录是一部分、UGC又是另一部分。与此同时,对数据本身进行水平划分,也就是Hash散表或者是散库。

第五阶段:

真的没了。再往下玩就灭了。

其实再进一步第五第六阶段,就是无法预想的未来了,也许有什么突飞猛进的科学技术发明也说不好。

 

附:豆瓣BeansDB的设计与实现

Qcon 2011:Beansdb 的设计与实现

View more presentations from Davies Liu

花瓣网的系统架构和消息队列系统

豆瓣网CTO洪强宁讲述网站架构变迁_第44张图片

你可能感兴趣的:(豆瓣网CTO洪强宁讲述网站架构变迁)