yarn資源管理優化

集羣環境: chd5-2.5.2 我們集羣使用的是FailScheduler,如果隊列參數設置不合理,會直接影響到任務執行的快慢。 隊列設置不合理 舉例如下: 現狀:該隊裏minshare設置的過小,同時起的任務太多 導致的問題:該隊列中平均每個任務分的資源比較少,任務跑的特別慢,同時,任務之間會相互搶佔container 比如下面的任務,跑了30多個小時,還沒跑完 看一下任務詳情: 1,當前只分
相關文章
相關標籤/搜索