美团大数据平台架构实践

美团大数据平台架构实践

在QCon北京2016的分享中,新美大离线大数据平台方向技术负责人谢语宸为大家介绍了美团网大数据平台架构,以及在平台演进过程中,美团网的选型和架构决策思路。

O2O 是新形式的电商,在其业务产品形式迭代过程中,会有大量的数据分析需求。近些年美团网在 O2O 领域,建平台,建生态。

随着电影、外卖、酒店、广告等新的业务线建立,以及如金融、汽车服务等新业务的尝试,数据平台同时面临业务多样性,场景多样性,数据量增长的持续挑战。

同时,业界的大数据平台技术持续发展,新技术,新架构层出不穷。

在本次分享中,谢语宸为大家介绍了美团网大数据平台架构,以及在平台演进过程中,美团网的选型和架构决策思路。

美团大数据平台架构实践_第1张图片

作者介绍

谢语宸,11 年加入美团网,推动数据仓库分布式化,数据开发平台化等关键大数据平台架构演进。现任新美大离线大数据平台方向技术负责人。

主要关注应用分布式计算,分布式存储,资源调度,数据分析引擎等技术构建稳定,弹性,易用的大数据平台架构。

幻灯片

美团大数据平台架构实践_第2张图片
美团大数据平台架构实践_第3张图片
美团大数据平台架构实践_第4张图片
美团大数据平台架构实践_第5张图片
美团大数据平台架构实践_第6张图片
美团大数据平台架构实践_第7张图片
美团大数据平台架构实践_第8张图片
美团大数据平台架构实践_第9张图片
美团大数据平台架构实践_第10张图片
美团大数据平台架构实践_第11张图片
美团大数据平台架构实践_第12张图片
美团大数据平台架构实践_第13张图片
美团大数据平台架构实践_第14张图片
美团大数据平台架构实践_第15张图片
美团大数据平台架构实践_第16张图片
美团大数据平台架构实践_第17张图片
美团大数据平台架构实践_第18张图片
美团大数据平台架构实践_第19张图片
美团大数据平台架构实践_第20张图片
美团大数据平台架构实践_第21张图片
美团大数据平台架构实践_第22张图片
美团大数据平台架构实践_第23张图片
美团大数据平台架构实践_第24张图片
美团大数据平台架构实践_第25张图片
美团大数据平台架构实践_第26张图片
美团大数据平台架构实践_第27张图片
美团大数据平台架构实践_第28张图片
美团大数据平台架构实践_第29张图片
美团大数据平台架构实践_第30张图片
美团大数据平台架构实践_第31张图片
美团大数据平台架构实践_第32张图片
美团大数据平台架构实践_第33张图片
美团大数据平台架构实践_第34张图片
美团大数据平台架构实践_第35张图片
美团大数据平台架构实践_第36张图片
美团大数据平台架构实践_第37张图片
美团大数据平台架构实践_第38张图片
美团大数据平台架构实践_第39张图片
美团大数据平台架构实践_第40张图片
美团大数据平台架构实践_第41张图片
美团大数据平台架构实践_第42张图片
美团大数据平台架构实践_第43张图片
美团大数据平台架构实践_第44张图片
美团大数据平台架构实践_第45张图片
美团大数据平台架构实践_第46张图片
美团大数据平台架构实践_第47张图片

在公众号后台回复“美团”,即可下载幻灯片。

QCon 上海 2016 将于10月20~22日在上海宝华万豪酒店举行。

百度外卖高级研究员蒋凡,届时将分享《外卖物流配送的大数据创新实践》。

餐饮 O2O 行业连接线上线下的订餐需求,外卖平台在这里扮演的角色除了促进线上需求向线下转化,也包括达成订单的最后一公里任务——物流配送。高效的物流配送能力是决定外卖平台商业模式成败的关键,也是 O2O 经济区别于传统经济的根本,即运用大数据相关的云计算、深度学习和可视化技术提升行业效率,创造并满足新的民生需求。

本次分享将深入介绍百度外卖物流调度系统应用大数据技术,摸索业务规律的过程和创新实践经验。

Vue Technology LLC 创始人,Vue.js 作者尤雨溪,将分享《Vue 2.0:渐进式前端解决方案》。

Vue.js 自去年 10 月发布 1.0 以来,增长势头迅猛。目前在 GitHub 有超过 2 万的关注,npm 每月下载量超过 10 万。在最近发布的 2.0 版本中,在保留 1.0 开发体验的基础上引入了更高效的 Virtual DOM 渲染层,更灵活的开发方式(同时支持模板/JSX),以及完善的服务端渲染支持(流式渲染 + 组件级缓存)。

在本次分享中,尤雨溪将从以下几个方面深入的剖析 Vue.js 的独特之处:

响应式模型:无缝将原生 js 对象转化为响应式的数据源

全自动的性能优化:基于 (1) 解决 Virtual DOM 的性能症结

开发体验:极简的 API,完善的工具链

渐进式架构:视图层核心 -> 路由 -> 状态管理方案 -> CLI

多端复用:基于 Node.js 的服务端渲染和基于 Weex 的移动端原生渲染

搜狗资深研究员周泽南,将分享《深度学习技术在图片搜索与图像搜索上的实践》。

人工智能在近年获得了重大的突破,其中深度学习发挥了至关重要的作用。它在计算机视觉、语言识别、自然语言处理等诸多领域取得了巨大的成功。搜狗公司作为一家科技创新型公司,在深度学习方面做了许多成功的探索。其中,将深度学习技术引入图片搜索排序、图像搜索排序,取得了理想的效果。本次演讲内容包括:

图片搜索中的 multimodal learning 方法实践;

图像搜索相关技术:图像特征表达、索引、相似度计算。

你可能感兴趣的:(美团大数据平台架构实践)