MapReduce概述

1、MapReduce概述 1.1 MapReduce定義 MapReduce是一個分佈式運算程序的編程框架,是用戶開發「Hadoop的數據分析應用」的核心框架。 MapReduce的思想核心是「分而治之」,適用於大量複雜的任務處理場景(大規模數據處理場景)。 Map負責「分」,即把複雜的任務分解爲若干個「簡單的任務」來並行處理。可以進行拆分的前提是這些小任務可以並行計算,彼此間幾乎沒有依賴關係。
相關文章
相關標籤/搜索