CacheManager原理剖析

前景:Task ——》 RDD(iterator方法) ——》計算當前Task要計算出來的那個partition 情景1: 該RDD是持久化過的:那麼StorageLevel肯定不是NONE,則會使用CacheManager去幫助我們直接讀取持久化過的數據     情景1.1:BlockManager,先嚐試從本地讀取(getLocal),或從遠程獲取(getRemote)     情景1.2:因
相關文章
相關標籤/搜索