Newegg.com大数据实践

概要
Newegg.com作为美国领先的电子商务网站，2012年，销售额达到数十亿美元。在Newegg.com，每天有数以千万计的用户浏览商品，并产生下单交易等后续操作。我们构建的数据系统，必须应对日益增大的数据量，具备健壮性、可靠性。目前，我们采用Big Data来构建Newegg.com的下一代存储系统和在线系统，支持Newegg.com在美国东西海岸、加拿大以及全球的业务发展。 Hadoop、HBase、Cassandra目前在Newgg.com都在应用，并且在快速发展中。我们也在实践中探索和前进。本演讲将介绍Newegg.com在大数据方面的一些项目经验，如下: Flume日志收集与统计系统 基于HBase的价格爬虫系统 Cassandra二级索引 定制的Cassandra Client-Canary 我们希望通过这些项目，分享我们在项目架构、开发、运维中的经验与教训。

个人简介

伍涛，英文名Tristan Wu，新蛋Newegg Support Center (NESC) Big Data Manager & Architect, 主要从事Cassandra / Hadoop / HBase方面的技术研发工作。伍涛于2007年获北京师范大学硕士学位，先后任职于NEC中国研究院移动计算部门、阿里巴巴集团核心系统部海量数据团队。

作为InfoQ主办的全球顶级盛会，QCon在伦敦、北京、东京、纽约、圣保罗、 杭州、旧金山举办过多次，这次是首次走进中国西南软件名都。希望能给当 地的公司、技术社区和技术人员提供一流的学习、交流平台。