Spark精選面試題七（精華篇）

一、driver的功能是什麼？ 一、一個Spark做業運行時包括一個Driver進程，也是做業的主進程，具備main函數，而且有SparkContext的實例，是程序的人口點；算法 二、功能：負責向集羣申請資源，向master註冊信息，負責了做業的調度，，負責做業的解析、生成Stage並調度Task到Executor上。包括DAGScheduler，TaskScheduler。sql 二、spar

>>阅读原文<<