MapReduce過程詳解

MapReduce是一種雲計算的核心計算模式,是一種分佈式運算技術,也是簡化的分佈式並行編程模式,主要用於大規模並行程序並行問題。  MapReduce的主要思想:自動將一個大的計算(程序)拆分成Map(映射)和Reduce(化簡)的方式。 流程圖如下:    數據被分割後通過Map函數將數據映射成不同的區塊,分配給計算集羣進行處理,以達到分佈運算的效果,再通過Reduce函數將結果進行彙整,從而
相關文章
相關標籤/搜索