300字看懂的MapReduce原理

聲明:本博文圖片均出自網絡,若侵權聯繫我刪。 先上圖。 作爲hadoop的核心模塊,首先切入點爲mapreduce。 可以看出在MapReduce的執行過程分爲兩個任務一部分是map task 一部分是reduce task。,Inputformat函數主要的功能有兩個第一個是數據切分,按照用戶編寫的MapReduce函數中的切分策略進行將數據進行切分,切成若干個split。第二個功能是將輸入到m
相關文章
相關標籤/搜索