Spark中Master、Worker、Client通信示意图

1.Master和Worker之间的消息传递示意图

Spark中Master、Worker、Client通信示意图_第1张图片
Master和Worker之间的消息传递示意图

2.Master和Client之间的消息传递示意图

Spark中Master、Worker、Client通信示意图_第2张图片
Master和Client之间的消息传递示意图

这几天主要都是基于Standalone分析的,最后以两张图完美收工,并附上系列文章。

3.系列文章

Spark Rpc通信源码分析 http://www.jianshu.com/p/5c2b4623d74d
Spark中Worker源码分析(一) http://www.jianshu.com/p/015b3ff0a5bf
Spark中Worker源码分析(二) http://www.jianshu.com/p/5719f4d29d23
Spark中Master源码分析(一) http://www.jianshu.com/p/817a7069d058
Spark中Master源码分析(二) http://www.jianshu.com/p/0c268f82d847
Spark中Client源码分析(一)http://www.jianshu.com/p/339fde3aff5d
Spark中Client源码分析(二)http://www.jianshu.com/p/9ee67bd36823
Standalone通过start-all.sh启动集群http://www.jianshu.com/p/abf37dad2724

时间有限,难免错误,欢迎交流。

你可能感兴趣的:(Spark中Master、Worker、Client通信示意图)