Spark executor 模块④ - Task 的执行流程

Task 的执行流程相关内容在一年多以前的文章 Task的调度与执行源码剖析 中已经介绍了很多,但那篇文章内容过长、条理不够清楚并且版本过于久远(本次针对2.0),这里趁分析 executor 模块的机会再写一写

Task 的执行流程分以下四篇进行介绍:

  1. 为 task 分配 executor
  2. 创建、分发 Task
  3. 执行 Task
  4. task 结果的处理

参考:《Spark技术内幕》


欢迎关注我的微信公众号:FunnyBigData

FunnyBigData

你可能感兴趣的:(Spark executor 模块④ - Task 的执行流程)