BlockManager原理和源碼解密(簡約版)

一、BlockManager運行實例觀察 從Application啓動的角度來觀察BlockManager; 1,在Application啓動時會在SparkEnv中註冊BlockManagerMaster以及MapOutputTracker,其中 a) BlockManagerMaster:對整個集羣的Block數據進行管理的; b) MapOutputTracker:跟蹤所有mapper的輸出
相關文章
相關標籤/搜索