大數據學習筆記19:MR解決問題思路

MR解決問題思路            1、分而治之   把一個大任務 劃分爲多個小塊 來分別計算      2、map 就是對每個小塊分別處理的過程,處理完產生一箇中間結果。一般這個中間結果要比原始數據小很多。         這多個小塊進行併發處理,提供處理速度。     3、reduce 是對中間結果的 彙總         reduce可能是一個 也可能是多個。上面例子中只能是一個。若是一
相關文章
相關標籤/搜索