Hadoop-MapReduce的工作原理

簡介 MapReduce是工作於Hadoop之上的計算模型,可以將一個大型計算任務拆分爲多個小的,可以在服務集羣運行和計算的小任務,並將各個小任務計算結果彙總爲一個計算結果;其過程主要分爲Map階段和Reduce階段,MapReduce有1.0版本和2.0版本; MapReduceV1主要概念: JobTracker: 作用是接受任務,計算資源,分配資源與DataNode通信,同時還需要分解作業以
相關文章
相關標籤/搜索