mapreduce筆記

map相當於映射，reduce是資源處理， 一個切片（物理邏輯概念）對應一個map 一個塊對應一個map 如果有一個窗口機制，能夠實現一個map對應塊中的其中的一條記錄，那就形成一個map對應一個記錄 map的數量根據切片來決定，切片根據數據特徵來決定，切片的大小可以改變，一個切片也可以對應兩個塊 reduce的數量由人來決定 一條記錄調用一次map MR原語： 輸入(格式化k,v)數據集map

>>阅读原文<<