Hadoop (二) MapReduce過程詳細講解

總體把握:html 1.有一個待處理的大數據,被劃分紅大小相同的數據庫(如64MB),以及與此相應的用戶做業程序。node 2.系統中有一個負責調度的主節點(Master),以及數據Map和Reduce工做節點(Worker).數據庫 3.用戶做業提交個主節點。緩存 4.主節點爲做業程序尋找和配備可用的Map節點,並將程序傳送給map節點。網絡 5.主節點也爲做業程序尋找和配備可用的Reduce節
相關文章
相關標籤/搜索