大數據009——MapReduce

分佈式離線計算框架MapReduce MapReduce是一種編程模型。Hadoop MapReduce採用Master/slave 結構。只要按照其編程規範,只需要編寫少量的業務邏輯代碼即可實現一個強大的海量數據併發處理程序。核心思想是:分而治之。Mapper負責分,把一個複雜的業務,任務分成若干個簡單的任務分發到網絡上的每個節點並行執行,最後把Map階段的結果由Reduce進行彙總,輸出到HD
相關文章
相關標籤/搜索