大數據學習筆記(MapReduce簡介)

什麼是MapReduce Hadoop MapReduce是一個易於編寫應用程序的軟件框架，該應用程序以一種可靠的、容錯的方式，在大型硬件集羣(數千個節點)上並行處理大量數據(多TB數據集)。 MapReduce的設計理念 MR主要思想就是： 分久必合 MR的核心思想： 「相同」的key爲一組，調用yicireduce方法，方法內迭代這一組數據進行計算 MR由兩個階段組成： map端 reduce

>>阅读原文<<