YARN調度器的性能瓶頸

DataNode主機上的AppMaster向ResoureSchedule請求資源, ResoureSchedule向AppMaster返回資源. 同時這個過程是異步的. 如何解決調度器調度能力不足, 計算資源浪費的問題. 調度器有: 公平調度器, 和容量量調度器. 公平調度器的性能瓶頸的核心原因是: 核心調度流程是單線程執行的。這意味着Container分配是串行的,這是調度器存在性能瓶頸的核心
相關文章
相關標籤/搜索