Spark架構原理

轉載文章地址 前言 本文總結了Spark架構原理,其中主要包括五個組件：Driver、Master、Worker、Executor和Task，簡要概括了每個組件是幹啥的，並總結提交spark程序之後，這五個組件運行的詳細步驟。 1、流程圖 爲了直觀，就把流程圖放在最前面了 2、Driver driver是一個進程，我們編寫的spark程序運行在driver上，由dirver進程執行，driver是

>>阅读原文<<