大數據面試(一)

大數據面試(一) mapreduce的原理與過程 mapreduce分爲map階段和reduce階段,主要來源於人類解決問題的過程。其中,map可以理解爲映射,是將數據x映射爲map(k,v)的過程,reduce的過程的以組爲單位的,一組數據調用一次reduce方法。 除了上述的map與reduce,切片也是mapreduce中重要的概念,切片是將要執行MapReduce的文件切成幾份,以提高ma
相關文章
相關標籤/搜索