Spark Streaming源码分析

1.全局类图

Spark Streaming源码分析_第1张图片

 蓝色背景运行在Worker节点,绿色运行在Driver节点

2. Worker Receiver 接收消息时序(以Kakfa Receiver为例)


3. Driver接收Work Receiver block生成消息时序

Spark Streaming源码分析_第2张图片

4、生成JOB、调用JOB处理时序


你可能感兴趣的:(Spark Streaming源码分析)