导读
12月20日,9:00-12:40,由爱奇艺副总裁出品的DataFunTalk年终大会——大数据应用论坛,将邀请来自爱奇艺、bilibili、网易、小米等公司的5位嘉宾,就数据中台、数据湖等大数据应用相关话题进行分享。本次会议全程直播,详细信息如下:
01 论坛及日程
论坛名称:大数据应用实践论坛
论坛出品:孙斌(爱奇艺副总裁)
09:00-09:40
基于大数据技术构建爱奇艺全链路监控平台
爱奇艺数据库和中间件负责人
郭磊涛
09:45-10:25
数据湖的初步探索与实践落地
bilibili实时平台负责人
郑志升
10:30-11:10
爱奇艺数据中台的建设实践
爱奇艺数据中台负责人
马金韬
11:15-11:55
Impala 3.4在网易的优化实践
网易资深大数据开发工程师
汪胜
12:00-12:40
Doris在小米数据中台中的实践
小米高级软件工程师
姚青林
02 详细介绍
出品人
孙斌
爱奇艺 | 副总裁
负责爱奇艺的商业智能、大数据、智能制作等部门和方向。在互联网产品设计和研发方面有十多年经验,曾就职于微软、hulu、雅虎等公司,也曾在国内知名互联网公司负责过创业项目。
分享嘉宾
郭磊涛
爱奇艺 | 数据库和中间件负责人
2007年博士毕业于中国科技大学计算机系,进入中国移动研究院负责大数据平台的建设,2014年加入爱奇艺负责数据库内核、中间件及运维系统的研发,热衷于 Hadoop 生态系统优化和高效运维架构。
演讲议题:基于大数据技术构建爱奇艺全链路监控平台
演讲议题介绍:为了适应业务的快速迭代和创新,并支撑海量的用户请求,爱奇艺各系统的架构和调用链路拓扑越来越复杂。如何构建高效易用的全链路监控平台,快速甄别调用链路上的故障及风险点,成为保障服务稳定性的关键问题。基于大数据相关的日志采集、Kafka、Flink实时分析、Elasticsearch、HBase和Druid等技术和组件,构建了爱奇艺全链路监控平台,通过调用依赖关系分析、服务间调用关系指标、程序异常分析、日志关联查询等功能,有效提高了链路故障和风险的定位和解决效率。本次议题将重点介绍爱奇艺全链路监控平台的架构及相关大数据技术的应用实践经验。
分享嘉宾
郑志升
bilibili | 大数据实时平台负责人
加入B站前曾任职于阿里巴巴。主导涵盖“数据埋点-实时传输接入-实时计算-开发应用”全链路的中台建设,目前重点关注实时(含增量)的传输与计算,实时机器学习等方向。
演讲议题:数据湖的初步探索与实践落地
演讲议题介绍:
1.数据ETL的痛点
2.基于数据湖的增量ETL
3.增量Append及Upsert的实现
4.未来展望
听众收益:
1.了解数据湖在数仓体系的一些落地应用场景
2.了解如何基于Flink+HUDI构建一套通用的ETL增量管道
3.了解数据在万亿规模下如何打造高性能和高可用的综合型ETL管道化服务
新技术/实用技术点:Flink、HUDI、数据湖、增量数仓
分享嘉宾
马金韬
爱奇艺 | 数据中台负责人
目前就职于爱奇艺,负责数据中台的规划、建设和推广工作,前后在360、百度和阿里巴巴等多家公司从事广告和大数据相关工作,目前主要关注大数据技术生态、发展方向和业务价值实现等方向。
演讲议题:爱奇艺数据中台的建设实践
演讲议题介绍:随着市场对数据价值的认可,促进了数据在各行各业的爆发式增长,以及大数据设施的快速演化,同时也带来了不少新的数据问题;解决这些问题,发挥更大的数据价值,成为了各大公司的重点工作。爱奇艺通过数据中台的建设和实施,发挥通用化、中心化、服务化和标准化等能力和特点,将数据能力覆盖到公司任何角落,赋能业务发展,并通过加深数据AI化等新的技术方式,对数据价值进行深度探索;本次分享将从数据中台的概念、架构、建设理念等角度切入,对关键组成部分进行深入介绍,让大家能够在理解中台的同时,了解到如何通过中台解决问题,帮助业务挖掘数据价值。
听众收益:理解数据中台,了解如何通过中台解决问题,清楚结合业务场景的方式。
新技术/实用技术点:数据中台、统一数仓+、统一服务等。
分享嘉宾
汪胜
网易 | 资深大数据开发工程师
Apache Impala committer。于2016年毕业加入网易,从事OLAP系统开发,目前负责网易大数据Impala&Kylin系统的相关工作。
演讲议题:Impala在网易的实践2.0
演讲议题介绍:本次分享主要介绍了Impala在网易的一些新实践,包括Impala对接Iceberg、Impala对接Alluxio等,以及未来的一些简单规划。
听众收益:可以了解到Impala的一些新特性,通过结合实际的业务需求,对实践有一定的帮助。
新技术/实用技术点:Impala、Iceberg
分享嘉宾
姚青林
小米 | 高级软件工程师
负责数据开发管理系统、元数据系统、数据质量系统、数据隐私管理等相关平台的架构与研发工作。在大数据领域有多年从业经验。
演讲议题:Doris 在小米数据中台中的实践
演讲议题介绍:本次分享主要集中在小米在数据中台建设中,选择使用Doris的过程、原因、以及定位。会详细介绍 Doris 的架构、适用的场景、成本节省等方面。最后会介绍我们期望的Doris未来的发展方向,展望云上Doris。
听众收益:了解小米数据中台建设过程中的最佳实践,Doris在其中的作用
新技术/实用技术点:Doris、数据中台、Interactive/Batch/Streaming processing
03 论坛报名
识别二维码 免费报名
也许你还想看
明天见 | 大数据应用与数据中台实践沙龙——不见不散
报名中 | 大数据应用与数据中台实践沙龙——坐标北京
扫一扫下方二维码,更多精彩内容陪伴你!
点击 阅读原文 直达报名页