MapReduce原理

簡介 MapReduce任務過程分爲兩個處理階段：map階段和reduce階段。每階段都以鍵-值對作爲輸入和輸出，其類型由程序員來選擇。程序員還需要寫兩個函數：map函數和reduce函數。 數據流 Hadoop將作業分成若干個任務（task）來執行，其中包括兩類任務：map任務和reduce任務。 map階段 數據劃分 Hadoop將MapReduce的輸入數據劃分成等長的小數據塊，稱爲輸入分片

>>阅读原文<<