spark2原理分析-Job執行框架概述

概述 本文描述了Spark2的job的實現框架，並對其各個組成部分進行了介紹。 spark的Job介紹 從前面的文章中我們知道：一般來說Spark RDD的轉換函數(transformation)不會執行任何動作，而當Spark在執行RDD的action函數時，Spark調度程序(scheduler)會構建執行圖(graph)併發起一個Spark作業(Job)。 Job由很多的Stage構成，這些

>>阅读原文<<