5-spark-memory

5-spark-memory.md 內存分類 堆內內存(On-heap Memory) 默認情況下，Spark 僅僅使用了堆內內存。Executor 端的堆內內存區域大致可以分爲以下四大塊： Execution 內存：主要用於存放 Shuffle、Join、Sort、Aggregation 等計算過程中的臨時數據 Storage 內存：主要用於存儲 spark 的 cache 數據，例如RDD的緩

>>阅读原文<<