走向雲計算之MapReduce原理和運行流程詳解

1、概述 MapReduce的設計理念源自於Google的MapReduce論文(發表於2004年12月),Hadoop MapReduce是Google MapReduce克隆版。MapReduce採用」分而治之」的思想,把對大規模數據集的操做,分發給一個主節點管理下的各個分節點共同完成,而後經過整合各個節點的中間結果,獲得最終結果。簡單地說,MapReduce就是」任務的分解與結果的彙總」。j
相關文章
相關標籤/搜索