Spark與Hadoop MR兄弟兩的不同

在大數據相關的面試中,經常會遇到了一個經典的問題:請說說Spark與Hadoop MR的異同? 雖然你有可能過關了,但是由於現場發揮的原因,看了這篇文章你還可以答得更好,就在這裏總結一下這個問題。 首先Spark是借鑑了mapreduce並在其基礎上發展起來的,繼承了其分佈式計算的優點並改進了mapreduce 明顯的缺陷,但是二者也有不少的差異具體如下: 1、spark把運算的中間數據存放在內存
相關文章
相關標籤/搜索