談下spark和hadoop

Spark及其生態圈概述 1.Spark 產生背景:面對Hadoop中MapReduce框架的侷限性和框架的多樣化特點，使得spark誕生。Spark的產生源於Matei Zaharia博士的論文------An Architecture for Fast and General Data。 框架的侷限性主要由4個方面： 1）代碼繁瑣（需要自己定義Map類和Reduce類以及在main方法的配置）

>>阅读原文<<