Spark運行架構

1 運行架構 Spark框架的核心是一個計算引擎,採用標準的master-slave的結構,圖中的Driver表示master,負責整個集羣的作業任務調度,Executor則是slave,負責實際執行任務 2 核心組件 2.1 Driver Spark驅動器節點,用於執行Spark任務中的main方法,負責實際代碼的執行工作 簡單理解就是Driver是驅使整個應用運行起來的程序 2.2 Execu
相關文章
相關標籤/搜索