Spark的架構和任務調度

Spark的任務調度順序： 1.首先我們會選擇集羣中的一臺機器去提交我們的代碼，我們提交的這個代碼就是一個application 2.如果是client的模式，會在提交任務的這臺機器上面開啓一個driver線程，如果是cluster的模式，會隨機選擇一臺機器開啓driver線程，driver開啓以後，就開始打算執行提交的代碼，開啓driver的時候對SparkContext進行初始化，因爲Spar

>>阅读原文<<