圖解wordcount mr執行流程

wordcount mr執行流程 對文本文件進行split 每個split對應一個map 進行處理 a => <a,1> 本地進行combiner操作(想當與本地reduce),相同的key進行彙總 shuffle 網絡傳輸按key進行分發數據,相同的key在同一個reduce reduce對 數據進行聚合並落盤
相關文章
相關標籤/搜索