Spark運行機制與原理詳解

先上圖(本身畫的有點醜) 這個就是Spark運行的基本流程圖。 或者看這個圖 能夠看出Spark運行通過如下幾個階段: 1.用戶編寫好SparkContext,新建立的SparkContext鏈接資源管理器cluster manager,其實Spark的還有其餘優秀的資源管理器能夠用,好比Standalone,Apache Mesos,YARN等。資源管理器根據用戶提交SparkContext時的
相關文章
相關標籤/搜索