大數據學習筆記16:MapReduce處理流程四

MapReduce處理流程四              1、上面 黑色實框 圈起來的 整體上 是   inputformat      2、inputformat 兩個功能: 切分數據、讀取數據       3、一個split 對應一個 map 處理      4、分區、排序 都屬於  shuffle       5、數據存儲交換都在 HDFS上      6、一個map 是一個進程 : 但是sp
相關文章
相關標籤/搜索