一週學習之MapReduce總結

分步式並行計算框架Map Reduce 是指實現某項任務或某項工作從開始到結束的計算過程或流的結構 MapReduce計算框架圖示: 分佈式並行計算架構 一個大的任務被拆分成多個小任務,每個小任務同時執行。按照執行流程進行計算。 MapReduce核心思想 分而治之,先分後和(只有一個模型) Map負責數據拆分 map: [k1,v1] → [(k2,v2)] Reduce負責數據合併 reduc
相關文章
相關標籤/搜索