Mapper-Reducer實例

一、MapReduce-分佈式計算系統 1.含義: MapReduce是一個基於集羣的高性能並行計算平臺。 MapReduce也是一個並行計算與運行軟件框架。 MapReduce也是一個並行程序設計模型與方法。 2.工作原理: Mapper:分割/提取 -流程 -讀取文件每行數據 -按需要的形式進行分割 -產生鍵值對<K,V> -按key值排序,分組 -輸出<K,V> eg:讀取 -產生鍵值對<j
相關文章
相關標籤/搜索