Spark(十四)Spark Core 調優之Spark內存模型

文章目錄 1、概述 2、堆內和堆外內存規劃 2.1 堆內內存 2.2 堆外內存 2.3 內存管理接口 3、內存空間分配 3.1 靜態內存管理 3.2 統一內存管理 4、存儲內存管理 4.1 RDD 的持久化機制 4.2 RDD 緩存的過程 4.3 淘汰和落盤 5、 執行內存管理 5.1 多任務間內存分配 5.2 Shuffle 的內存佔用 1、概述 Spark 做爲一個基於內存的分佈式計算引擎,其
相關文章
相關標籤/搜索