Spark學習筆記(一)--Spark架構

Spark架構採用了分佈式計算中的Master-Slave模型。Master是對應集羣中的含有Master進程的節點,Slave是集羣中含有Worker進程的節點。Master做爲整個集羣的控制器,負責整個集羣的正常運行;Worker至關因而計算節點,接收主節點命令與進行狀態彙報;Executor負責任務的執行;Cluster做爲用戶的客戶端負責提交應用,Driver負責控制一個應用的執行。具體以
相關文章
相關標籤/搜索