Spark之核心組件

一、Spark核心組件 實際工作中，會使用YARN Cluster模式。Spark在執行過程中懶執行，直到action操作時才觸發job，之後根據寬依賴劃分stage，stage被整理成TaskSet，TaskSet裏面有多個task，每個task被分發到具體的executor裏執行。 1、Driver Spark驅動節點，用於執行Spark任務中的main方法，負責實際代碼的執行工作。Drive

>>阅读原文<<