Spark內核架構剖析

先來章整個SparkContext的架構圖: 1、spark-submit 提交Application到Driver上。 當用spark-shell交互式工具提交Spark的Job時,Driver在Master節點上運行 當使用spark-submit工具提交Job或者在Eclips、IDEA等開發平臺上使用」new SparkConf.setManager(「spark://master:707
相關文章
相關標籤/搜索