最詳細的Spark內存管理

spark 各版本的內存參數:   一.Spark 1.6內存管理: spark 1.6之前 使用StaticMemoryManager,叫legacy模式,默認是關閉的。 spark1.6開始,使用UnifiedMemoryManager。 1.6開始的內存結構:   由上圖知道,內存由三部分組成。 1.Reserved Memory ,系統保留的內存,是硬編碼寫死的,spark 1.6 這個值
相關文章
相關標籤/搜索