spark工做流程及原理(一)

Spark架構的組成圖以下:java Cluster Manager:在standalone模式中即爲Master主節點,控制整個集羣,監控worker。在YARN模式中爲資源管理器node Worker節點:從節點,負責控制計算節點,啓動Executor或者Driver。多線程 Driver: 運行Application 的main()函數架構        Executor:執行器,是爲某個A
相關文章
相關標籤/搜索