map/reduce 過程的認識

      map/reduce 過程的認識         最初我一直簡單的以爲map的工作就是將數據打散,而reduce就是將map打散後的數據合併。雖然之前跑過wordcount的例子,但之前只是對輸出reduce最終的結果感興趣,對控制檯打印的日誌信息完全不懂。這幾天我們團隊在探索pagerank,纔開始對map/reduce有了深一層的瞭解。當一個job提交後,後續具體的一系列分配調度工
相關文章
相關標籤/搜索