Facebook的海量数据架构演变过程

概要
一年前,Facebook的集群存储了30千万亿字节的数据,大概是美国国会图书馆存储信息数量的3000倍。Facebook数据中心在过去一年里增长了三分之一还多。 今年4月份,Facebook耗资4.5亿美金建设的新数据中心也已经投入使用。 从2007年到2011年,Facebook的大数据处理架构是如何演变的?在一个变动异常频繁,并且快速增长的环境里,都要面临哪些挑战?Facebook使用了一些组件和技术,让公司大部分部门都可以根据不同的目的访问、分析、使用数据,背后的驱动力是什么?Ashish Thusoo在本演讲中将会回答这些问题,同时会介绍从Facebook的经验中的一些重要收获。

个人简介

ASHISH Thusoo是Qubole 联合创始人兼CEO。Qubole是一个建设云平台进行数据分析和处理的创业企业。在创办Qubole之前,ASHISH负责Facebook数据基础设施团队。在他的领导下,团队创造了世界上最大的数据分析与处理平台。该平台实现了公司内部分析师,工程师以及数据科学家得以访问数据的大胆目标。在这一过程中,他帮助推动创造“大数据”部署工具,技术和模板的实现 – 这已经成为主流“大数据”革命的构件。他也是Apache蜂巢的联合创始人,并作为该项目的Apache软件基金会的创始副总裁。ASHISH作为一名工程师在甲骨文开始了他的职业生涯,在那里,他贡献了Oracle RDBMS中众多核心部件并从中学到了构建成功产品的艺术。

本次ArchSummit峰会的议题以实践为导向,大部分议题都能让参会者看到同行 在不同场景中遇到什么样的问题,以及如何解决这些问题;同时还提供具备理 论高度的演讲,让架构师们可以从更高的角度思考自己的日常架构设计工作。 本次峰会包括7场主题演讲,4场圆桌讨论和9个分论坛。 本次架构师峰会讲师阵容强大,国际讲师层面,我们会从Facebook、IBM、 VMWare等国际知名公司邀请,国内讲师则既有来自腾讯、新浪、百度、淘 宝等一线互联网企业,也有花瓣、又拍、雪球财经等创业公司的架构师, 还有一些讲师来自金融、电信领域。

你可能感兴趣的:(Facebook的海量数据架构演变过程)