MapReduce中InputFormat和InputSplit解讀

MapReduce中InputFormat和InputSplit解讀數組          Hadoop的Mapreduce是一個分佈並行處理大數據的程序框架,一個Map/Reduce做業(job)一般會把指定要處理(在job的配置中由咱們來指定)數據集切分爲若干獨立的數據塊(這個工做由mapreduce計算框架自動去完成),而後再由 map任務(task)以徹底並行的方式處理它們。app    
相關文章
相關標籤/搜索