spark2原理分析-Job對象的實現原理

概述 本節介紹Spark Job對象的實現原理。 Job的基本概念 在《spark2原理分析-Job執行框架概述》一文中介紹了Job的執行框架的基本概念,本節詳細介紹其中的Job對象的實現原理。 上面的文章已經介紹過了,Job是由於執行Action操作函數產生的。Job是提交給 DAGScheduler(Job調度器)來計算action操作結果的頂層工作單元(計算單元)。在Spark代碼實現層面,
相關文章
相關標籤/搜索