spark的架構

spark架構採用了分佈式計算中的master-slave模型,master是對應集羣中含有master進程的節點,slave是集羣中含有worker進程的節點,master做爲整個集羣的控制器,負責整個集羣的正常運行,worker至關因而計算節點,接受主節點命令與進行狀態彙報。node Executor負責任務的執行,client做爲用戶的客戶端負責提交應用,driver負責控制一個應用的執行 
相關文章
相關標籤/搜索