YARN架構詳解

MapReduce v1的不足 Jobtraker受內存限制,導致擴展性受限。因爲其需要存儲每個作業的信息。另一方面,其採用粗粒度的鎖導致心跳時間邊長。 中心化架構的通病,一旦Jobtraker崩潰,會導致整個集羣崩潰。 以mapreduce爲中心,MapReduce不支持其他的編程模型,如機器學習,圖算法 tasktraker的Map 槽和Reduce槽是固定的,不是動態分配的資源。 Yarn(
相關文章
相關標籤/搜索