Task運行過程分析1

一、Task運行過程概述 在MapReduce計算框架中,一個應用程序被劃分紅Map和Reduce兩個計算階段,它們分別由一個或者多個Map Task和Reduce Task組成。其中,每一個Map Task處理輸入數據集合中的一片數據(InputSplit),並將產生的若干個數據片斷寫到本地磁盤上,而Reduce Task則從每一個Map Task上遠程拷貝相應的數據片斷,經分組彙集和歸約後,將
相關文章
相關標籤/搜索