超簡單讀懂mapreduce的工做過程

Tip:本文適合編寫過mapreduce程序,但不知道它工做原理的朋友閱讀,它會讓你在很短期內瞭解整個過程。前端 本文分爲map端 和reduce端兩張圖講解,請放大圖片來看。後端 一.Map task 1.由程序內的InputFormat(默認實現類TextInputFormat)來讀取外部數據,它會調用RecordReader(它的成員變量)的read()方法來讀取,返回k,v鍵值對。數組 2
相關文章
相關標籤/搜索