MapReduce核心原理與使用

一MapReduce介紹 MapReduce是一種可用於數據處理的編程框架。MapReduce採用"分而治之"的思想，把對大規模數據集的操作，分發給一個主節點管理下的各個分節點共同完成，然後通過整合各個節點的中間結果，得到最終結果。簡單地說，MapReduce就是"任務的分解與結果的彙總"。 在分佈式計算中，MapReduce框架負責處理了並行編程中分佈式存儲、工作調度、負載均衡、容錯均衡、容錯處

>>阅读原文<<