hadoop筆記1-MR執行過程

MR執行過程包括Map、Shuffler、Reduce，其中Map、Reduce及Shuffler中的分區、合併、排序是能夠容許程序員編程參與的。程序員 一、Map階段。算法 split-----map----partition sort and spill to disk------combine。編程 1）split的目的是應一個原始文件分紅多個文件，分別交由不一樣的map節點處理，文件塊大小

>>阅读原文<<