spark總複習

1 緩存及緩存級## 標題別 緩存的方法有兩個cache和persist緩存有兩個方法cache和persist, 通過源碼可以看出cache調用了persist, 所以這兩個方法運行的效率可以看做是一樣的 在persist方法中需要傳入StorageLevel這個對象 StorageLevel對象中可以指定緩存的數據存入到內存中, 磁盤中, 堆外緩存中, 是否關閉序列化, 以及副本數量 存儲級別

>>阅读原文<<