淘宝量子统计架构设计中的核心点

概要
在本演讲中,讲师从量子统计面临的业务挑战谈起,包括成本;高并发数据分析网站的C10K问题;关系型数据库和实时数据计算结果的异构融合;复杂的数据查询接口逻辑和开发效率、查询效率、和正确性;以及分布式计算和任务管理等。然后针对量子系统架构设计中的核心点进行逐个分析,包括Ajax为核心的javascript富客户端展现、Nginx为基础构建的数据接口中间层、实时流计算框架(SuperMario)和实时数据计算引擎、离线分布式计算和任务调度管理和数据分析网站的运维等。最后还会提到目前量子的技术研究方向:多维数据分析在互联网电子商务中的应用、数据可视化和NoSQL产品在实时计算中的应用等。

个人简介

张茂森,毕业于哈尔滨工业大学,获理学硕士学位。从2006年至今,先后供职于阿里巴巴旗下雅虎中国、淘宝,目前任职一淘网数据部高级技术专家。主要关注的技术领域包括海量数据的离线分布式处理和在线流式实时处理、基于REST模式的web 2.0高性能数据分析网站框架,以及对开源关系型数据库(Mysql/Postgresql)源码有深入研究。同时也关注异构高性能并行计算、推荐系统和多维数据分析等技术。

百度技术沙龙是由百度与InfoQ中文站定期组织的线下技术交流活动。目的是让中高端技术人员有一个相对自由的思想交流和交友沟通的的平台。主要分讲师分享和OpenSpace两个关键环节,每期只关注一个焦点话题。“畅想•交流•争鸣•聚会”是百度技术沙龙的宗旨。

你可能感兴趣的:(淘宝量子统计架构设计中的核心点)