
上QQ阅读APP看书,第一时间看更新
第4章
Spark Driver启动内幕剖析
本章将对Spark Driver启动内幕进行剖析。4.1节对Spark Driver Program进行解析,深度剖析SparkContext;4.2节解析DAGScheduler,讲解DAGScheduler划分Stage及Stage内部Task获取最佳位置的算法;4.3节对底层调度器TaskScheduler进行解析;4.4节解析SchedulerBackend;4.5节整体讲解Spark系统运行内幕机制的循环流程。