pyspark系統學習1

Spark發展              Spark執行過程       任何Spark應用程序都會分離主節點上的單個驅動進程（可以包含多個作業），然後將執行進程分配給多個工作結點，如下圖：                                              驅動進程會確定任務進程的數量和組成，這些任務進程是根據爲指定作業生成的圖形分配給執行節點的。注意，任何工作節點都可以執

>>阅读原文<<