百度开放云大数据技术演进历程

概要
2015年9月8日，百度世界大会正式对外发布百度开放云大数据解决方案，多个曾获得百度最高奖的大数据分析和挖掘产品正式以服务形式对外开放，这些产品和服务对内支持了百度23个用户量过亿的产品，包括但不限于手机百度、百度地图、百度云盘、百度贴吧、百度知道等，还支持了包括凤巢、网盟等百度推广产品，超过百万广告客户；本次分享将这些产品和服务背后的故事，包括架构演进历程，面临的主要挑战，解决思路和实施过程，同时还将介绍百度在该领域的最新思考。演讲内容将包括：全球最大Hadoop平台演进历程；百度在大数据处理方面的最新思考；百度开放云大数据解决方案。

个人简介

朱冠胤，2008年硕士毕业于北邮，现任百度开放云大数据负责人，基础架构部高级技术经理。2008年1月加入百度实习，作为国内首批Hadoop研发工程师之一，参与了百度Hadoop平台从无到单集群全球最大整个过程；2009年开始作为负责人开始从无到有建设百度大规模机器学习平台，陆续参与了凤巢CTR预估、网盟CTR预估、大搜索PageRank、机器翻译等核心机器学习项目。2014年8月，与其他部门联合研发的深度学习平台获百度最高奖；2015年8年，带领团队完成的智能服务调度系统-Normandy获得百度最高奖。目前主要负责百度开放云大数据产品研发和推广，已上线国内首个云端全托管的Hadoop/Spark服务BMR，国内首个机器学习云服务BML等。关注领域主要是大数据分析和挖掘技术，包括但不限于Hadoop/Spark、深度学习等。

QCon是由InfoQ主办的全球顶级技术盛会，每年在伦敦、北京、东京、纽约、圣保罗、上海、旧金山召开。自2007年3月份首次举办以来，已经有超万名高级技术人员参加过QCon大会。QCon内容源于实践并面向社区，演讲嘉宾依据热点话题，面向5年以上的技术团队负责人、架构师、工程总监、高级开发人员分享技术创新和最佳实践。