Spark術語理解

爲了理解Spark中一些術語,仔細閱讀了官方文檔以及查閱了相關資料,現記錄如下: 1.Application: 在spark上構建的應用程序,由driver和executors構成; 2.work node:工作節點,在集羣中能夠運行app的任何節點。 3.driver:運行main函數並創建SparkContext的進程,在Client模式中,在集羣外開啓driver;cluster中,在集羣中
相關文章
相關標籤/搜索