MapReduce切片機制

MapReduce切片機制 爲什麼需要切片   MapReduce是一個分佈式計算框架，處理的是海量數據的計算。那麼並行運算必不可免，但是到底並行多少個Map任務來計算呢？每個Map任務計算哪些數據呢？這些我們數據我們不能夠憑空估計，只能根據實際數據的存儲情況來動態分配，而我們要介紹的切片就是要解決這個問題， 切片機制原理   切片的規則我們需要通過閱讀源代碼來了解。首先我們來看下hadoop中默

>>阅读原文<<