hadoop MapReduce 詳解

首先強調一下，本文是以hadoop 1.x版本爲基礎整理完成的。 在hadoop中，每個MapReduce任務都被初始化成爲一個Job，每一個Job都可以分成兩個階段：Map階段以及Reduce階段。Map階段會接受一個<key,value>的輸入，產生一個<key,value>的中間輸出，hadoop會把這些key相同的value集合到一起傳給reduce函數，reduce會接受一個<key,(

>>阅读原文<<