【Spark】Spark常見問題彙總

【架構】 Spark採用了分佈式計算中的Master-Slave模型。 【1】Master作爲整個集羣的控制器,負責整個集羣的正常運行;【2】Worker是計算節點,接受主節點命令以及進行狀態彙報; 【3】Executor負責任務(Tast)的調度和執行; 【4】Client作爲用戶的客戶端負責提交應用; 【5】Driver負責控制一個應用的執行。 Spark集羣啓動時,需要從主節點和從節點分別啓
相關文章
相關標籤/搜索