MapReduce分佈式計算原理

本文主要經過一個例子引出MapReduce，介紹MapReduce分佈式計算原理。 首先爲了方便你們理解，先來說一個伐樹的例子 有abc三座山，山上有橡木、紅木、樟木，如今派三個工人去伐木 工人在山上伐木並將樹木進行簡單的加工，組裝，而後發送給工廠進行組裝 在這個過程當中： 工人至關於Map 工人在每一個山頭組裝——>combiner 將半成品運輸到工廠——>shuffle （網絡IO，這是最耗時

>>阅读原文<<