淺談MapReduce的原理及編程

什麼是MapReduce MapReduce是一個分佈式計算框架； 它將大型數據操作作業分解爲可以跨服務器集羣並行執行的單個任務；適用於大規模數據處理場景；每個節點處理存儲在該節點的數據；每個 job 包含Map和Reduce兩部分 MapReduce的設計思想 1、分而治之 簡化並行計算的編程模型 2、構建抽象模型 開發人員專注於實現 Mapper 和 Reduce 函數 3、隱藏系統層細節 開

>>阅读原文<<