Spark-概覽

文章目錄 多線程模型 異步併發模型 作業提交 寬/窄依賴 任務調度 Shuffle RDD持久化 Spark集羣分爲Master節點和Worker節點，相當於Hadoop的Master和Slave節點。Master節點上常駐Master守護進程，負責管理全部的Worker節點。Worker節點上常駐Worker守護進程，負責與Master節點通信並管理executors。 Driver 官方解釋是

>>阅读原文<<