Spark 內存分配

Spark1.5堆內存分配   這是spark1.5及以前堆內存分配圖 下邊對上圖進行更近一步的標註，紅線開始到結尾就是這部分的開始到結尾   spark 默認分配512MB JVM堆內存。出於安全考慮和避免內存溢出，Spark只允許我們使用堆內存的90%，這在spark的spark.storage.safetyFraction 參數中配置着。也許你聽說的spark是一個內存工具，Spark允許你

>>阅读原文<<