流批一体架构:从“物理”到“逻辑”代码的数据研发

导读 

在大数据领域中,流式图计算(Streaming Graph Processing)作为一种用于处理实时数据流的计算模型和技术,结合了图计算和流式数据处理的概念,旨在处理数据流中的节点(vertices)和边(edges)之间的关系,以实时分析、处理和理解不断涌现的数据。蚂蚁集团对于流式图计算在实时数据处理与分析领域有较成熟的体系。今天主要介绍蚂蚁集团实时数据体系和关键技术、基于流式图计算的实时流量归因场景应用,以及基于流式图计算在支付宝营销场景实时 OLAP 和数金场景实时用户行为意图分析的探索。

今天的介绍会围绕以下几点展开:

1. 蚂蚁实时数据整体介绍

2. 流式图计算在实时流量归因场景的应用

3. 流式图计算在实时 OLAP 场景的探索

4. 流式图计算在实时用户行为意图分析场景的探索

5. 未来展望

分享嘉宾|王鑫 蚂蚁集团 实时数据负责人

编辑整理|陈妃君

内容校对|李瑶

出品社区|DataFun


01 蚂蚁实时数据整体介绍

首先介绍的是蚂蚁集团实时大数据能力框架图。

1.  蚂蚁实时能力大图

流批一体架构:从“物理”到“逻辑”代码的数据研发_第1张图片

总体分基础技

你可能感兴趣的:(大数据AI人工智能,架构,大数据)