Spark架構原理-Spark運行架構剖析

一、Spark基本概念 在學習Spark運行架構之前,我們有必要先了解Spark中幾個基本概念。 1、Application(應用程序):是指我們編寫的Spark應用程序,包含驅動程序(Driver)和分佈在及羣衆多個節點上運行的Executor代碼,在執行過程中由一個或多個job組成。 2、Driver(驅動程序):Spark中的Driver即運行Application的main方法,並且創建S
相關文章
相關標籤/搜索