MapReduce原理及編程

Hadoop架構 HDFS——分佈式文件系統 MapReduce——分佈式計算框架 YARN——分佈式資源管理系統 Common MapReduce 什麼是MapReduce MapReduce是一個分佈式計算框架 它將大型數據操作作業分解爲可以跨服務器集羣並行執行的單個任務 適用於大規模數據處理場景 每個節點處理存儲在該節點的數據 每個job包含Map和Reduce兩部分 MapReduce的設

>>阅读原文<<