Spark內存管理原理(上)

          Spark運行是內存分爲三部分,執行內存(execute memory),存儲內存(storge memory),預留內存(reserved memory).在1.6版本之前執行內存和存儲內存是靜態分配的,意思着應用一啓動後,各區域的內存大小就是不變的。這就會帶來一個後果,有時執行內存嚴重不足,可是存儲內存又都沒怎麼用,或者相反。由於這個問題,spakr1.6版本以後引入的動態
相關文章
相關標籤/搜索