Spark--RDD持久化

相信大家都知道的一個常識,在計算機的硬件中能夠進行存儲的就是內存和硬盤兩個硬件,但是同樣的,大家也很清楚,在同樣的數據處理的讀寫過程中,硬盤和內存的運行效率差距是非常大的,而內存作爲硬盤和cpu進行數據交換的中轉站,屬於臨時存儲器,雖然通過快速的數據傳輸速度彌補了硬盤容量大但是傳送速度慢的特點,所以當計算在內存上進行會比磁盤上進行要快很多。 相信開車的朋友都知道,同樣性能的車,在比較堵的城市道路上
相關文章
相關標籤/搜索