MapReduce核心概念及架構

MapReduce簡介 MapReduce常用於對大規模數據集(大於1TB)的並行運算,或對大數據進行加工、挖掘和優化等處理。 MapReduce將並行計算過程高度抽象到了兩個函數map和reduce中,程序員只需負責map和reduce函數的編寫工作,而並行程序中的其它複雜問題(如分佈式存儲、工作調度、負載均衡、容錯處理等)均可由MapReduce框架代爲處理,程序員完全不用操心。 MapRed
相關文章
相關標籤/搜索