每次進步一點點——spark中cache和persist的區別

昨天面試被問到了cache和persist區別,當時只記得是其中一個調用了另外一個,但沒有回答出兩者的不一樣,因此回來後從新看了源碼,算是弄清楚它們的區別了。java cache和persist都是用於將一個RDD進行緩存的,這樣在以後使用的過程當中就不須要從新計算了,能夠大大節省程序運行時間。web cache和persist的區別 基於Spark 1.4.1 的源碼,能夠看到面試 /** Pe
相關文章
相關標籤/搜索