Hadoop架構介紹——MapReduce的體系結構

MapReduce的體系結構: -分佈式編程架構算法 -以數據爲中心,更看重吞吐率編程 -分而治之(把對大規模數據集的操做,分發給一個主節點管理下的各個分節點共同完成,而後整合各個節點的中間結果獲得最終的輸出)架構 -Map把一個任務分解成多個子任務分佈式 -Reduce將分解後的多任務分別處理,並將結果彙總爲最終的結果函數 應用舉例:清點圖書館藏書、統計單詞的出現次數、混合辣椒醬的製做等等。oo
相關文章
相關標籤/搜索