Spark架構原理

一、Spark運行架構 1.1 術語定義 Application:Spark Application的概念和Hadoop MapReduce中的相似,指的是用戶編寫的Spark應用程序,包含了一個Driver 功能的代碼和分佈在集羣中多個節點上運行的Executor代碼; Driver:Spark中的Driver即運行上述Application的main()函數而且建立SparkContext,其
相關文章
相關標籤/搜索