Spark組件之SparkContext原理源碼剖析(乾坤大挪移第二層)

今天談一下Spark比較重要的組件。 文章有不足之處，多多指正。 SparkContext 三個重點： TaskScheduler，如何註冊application，executor如何反向註冊 （重中之重） DAGScheduler的通信 SparkUI顯示的是什麼，用的是什麼服務器 上流程圖： TaskScheduler的創建流程如下： 流程總結： 啓動CreateTaskScheduler（）

>>阅读原文<<