MapReduce程序運行流程

爲了方便理解,先用作圖的方式進行闡述:          MapReduce程序的執行過程分爲兩個階段:Mapper階段和Reducer階段。 其中Mapper階段可以分爲6個步驟: 第一階段:先將HDFS中的輸入文件file按照一定的標準進行切片,默認切片的類爲FileInputFormat,通過切片輸入文件將會變成split1、split2、split3……;隨後對輸入切片split按照一定的
相關文章
相關標籤/搜索