SparkContext初始化的核心过程

1、依据sparkContext的构造方法的参数sparkConf创建一个sparkEnv

2、初始化sparkUI,以便sparkApplication运行时方便用户监控 默认端口4040

3、创建和启动scheduler

       创建TaskScheduler,SchedulerBackend

       创建BAGScheduler

      启动 TaskScheduler。BAGScheduler

4、启动Executors

你可能感兴趣的:(SparkContext)