Spark內存管理(一)——靜態內存管理模型

Spark靜態內存管理模型 一 .簡介 spark從1.6開始引入了動態內存管理模式，即執行內存和存儲內存之間可以互相搶佔。所以從spark 1.6以後，spark提供兩種內存分配模式，即：靜態內存管理和動態內存管理。 該篇文章主要針對spark靜態內存管理進行了分析與說明 二 . 模型總覽 從下圖可以清晰的看出每個executor的內存分配: 上圖代表了spark中的每個worker(execu

>>阅读原文<<