mapreduce的執行流程以及shuffle過程

一、mapreduce概述          a.mapreduce是一種分佈式的計算模型,由google提出,主要用於搜索領域,解決海量數據的計算問題。          b.mapreduce由兩個階段組成,map和reduce,用戶只須要實現map()和reduce()兩個函數,便可實現分佈式計算。          c.這兩個函數的key,value對,表示函數的輸入信息。 2.mapre
相關文章
相關標籤/搜索