spark從入門到放棄六: RDD 持久化原理

文章地址:http://www.haha174.top/article/details/252484 spark 中一個很是重要的功能特性就是能夠將RDD 持久化到內存中。當對RDD進行持久化操做時,每一個節點都會將本身操做的RDD的partition持久化到內存中,而且以後對該RDD的反覆使用直接使用內存緩存的partion.這樣的話針對一個RDD反覆執行多個操做的場景就只要對RDD計算一次便可
相關文章
相關標籤/搜索