Spark和Hadoop的架構區別解讀

總的來說,Spark採用更先進的架構,使得靈活性、易用性、性能等方面都比Hadoop更有優勢,有取代Hadoop的趨勢,但其穩定性有待進一步提高。我總結,具體表現在如下幾個方面: 框架: Hadoop:MapRedcue由Map和Reduce兩個階段,並通過shuffle將兩個階段連接起來的。但是套用MapReduce模型解決問題,不得不將問題分解爲若干個有依賴關係的子問題,每個子問題對應一個Ma
相關文章
相關標籤/搜索