MapReduce

MapReduce編程模型 MapReduce是一種海量數據的並行編程模型和計算框架，它最早運行在Google的分佈式系統GFS下，後面Hadoop也實現了MapReduce編程模型和計算框架。MapReduce的主要思想把大規模數據的操作分發一個主節點管理下的分節點共同完成，然後整合各分節點的結果，得到最終的結果。 並行編程會遇到各種複雜的問題：分佈式存儲、工作調度、負載均衡、容錯處理、網絡通信

>>阅读原文<<