MapReduce的架構組成

MapReduce基本架構 一句話——整體依舊主從構,map加redu(reduce簡寫)。 map、split入磁盤,數據對分partition。shuffle、sort、key-value,一個redu(reduce)一 tion(partition)透。注:最後一句,一個reduce解析一個partition。 一堆話——如下: 和HDFS一樣,MapReduce也是採用Master/Sla
相關文章
相關標籤/搜索