MapReduce核心思想及關鍵步驟

MapReduce核心思想 分而治之，先分後和（只有一個模型） Map負責數據拆分 map: [k1,v1] → [(k2,v2)] Reduce負責數據合併 reduce: [k2, {v2,…}] → [k3, v3] Mapreduce的輸入是一個目錄，那麼會將目錄內的所有文件進行讀取計算， 若是一個文件，那麼只計算該文件。 Mapreduce的輸出路徑絕對不能已存在 Mapreduce M

>>阅读原文<<