hadoop集羣老的資源管理Mrv1與Yarn資源管理器的工作流程和對比

MRv1缺點 1、JobTracker容易存在單點故障 2、JobTracker負擔重,既要負責資源管理,又要進行作業調度;當需處理太多任務時,會造成過多的資源消耗。 3、當mapreduce job非常多的時候,會造成很大的內存開銷,在  TaskTracker端,以mapreduce task的數目作爲資源的表示過於簡單,沒有考慮到cpu以及內存的佔用情況,如果兩個大內存消耗的task被調度到
相關文章
相關標籤/搜索