下一代Apache Hadoop MapReduce框架的架構

背景   隨着集羣規模和負載增加，MapReduce JobTracker在內存消耗，線程模型和擴展性/可靠性/性能方面暴露出了缺點，爲此需要對它進行大整修。 需求 當我們對Hadoop MapReduce框架進行改進時，需要時刻謹記的一個重要原則是用戶的需求。近幾年來，從Hadoop用戶那裏總結出MapReduce框架當前最緊迫的需求有： （1）可靠性（Reliability）– JobTrac

>>阅读原文<<