聊聊MapReduce處理過程中的數據類型與數據格式

MapReduce處理過程總覽 對於MP的處理過程我想大部分人都已經知道了其原理,思路不難,這是肯定的,但是整個過程中需要考慮的細枝末節的點還挺多的,MP的輸入輸出格式就是其中的一點,那本文就帶領大家看看MP中的格式設置問題。 map函數,起到了如下的轉換作用:map:(k1,v1)—>list(k2,v2) reduce 函數,則起到了這樣的格式轉換作用:reduce:(k2,list(v2))
相關文章
相關標籤/搜索