瞭解inputSplit

瞭解inputSplit Hadoop將MapReduce的輸入數據劃分紅等長的小數據塊,稱爲輸入分片(input split)或簡稱爲「分片」。Hadoop爲每一個分片構建一個map任務,並由該任務來運行用戶自定義的map函數從而處理分片中的每條數據。web getSplits()負責將文件切分紅多個分片(InputSplit),但InputSplit並無實際切分文件,而只是說明了如何切分數據,
相關文章
相關標籤/搜索