spark 大型項目實戰(二十六): --性能調優之在實際項目中分配更多資源

分配更多資源:性能調優的王道,就是增長和分配更多的資源,性能和速度上的提高,是顯而易見的;基本上,在必定範圍以內,增長資源與性能的提高,是成正比的;寫完了一個複雜的spark做業以後,進行性能調優的時候,首先第一步,我以爲,就是要來調節最優的資源配置;在這個基礎之上,若是說你的spark做業,可以分配的資源達到了你的能力範圍的頂端以後,沒法再分配更多的資源了,公司資源有限;那麼纔是考慮去作後面的這
相關文章
相關標籤/搜索