Spark源碼系列(四)圖解作業生命週期

Source:Spark源碼系列(四)圖解作業生命週期 這一章我們探索了Spark作業的運行過程,但是沒把整個過程描繪出來,好,跟着我走吧,let you know! 我們先回顧一下這個圖,Driver Program是我們寫的那個程序,它的核心是SparkContext,回想一下,從api的使用角度,RDD都必須通過它來獲得。 下面講一講它所不爲認知的一面,它和其它組件是如何交互的。 Drive
相關文章
相關標籤/搜索