Spark參數spark.executor.memoryOverhead與spark.memory.offHeap.size的區別

最近疑惑一個問題，spark executor的堆外內存問題，堆外內存很好理解，這裏不再解釋，疑惑的是它的設置，看過官網就知道設置堆外內存的參數爲spark.executor.memoryOverhead與spark.memory.offHeap.size(需要與 spark.memory.offHeap.enabled同時使用)，其中這兩個都是描述堆外內存的，但是它們有什麼區別麼？   因爲對兩

>>阅读原文<<