Spark on Yarn和MapReduce on Yarn區別

 Apache Spark的高性能一定程度上取決於它採用的異步併發模型(這裏指server/driver端採用的模型),這與Hadoop 2.X(包括YARN和MapReduce)是一致的。Hadoop2.X自己實現了類似Actor的異步併發模型,實現方式是epoll+狀態機,而Apache Spark則直接採用了開源軟件Akka,該軟件實現了Actor模型,性能非常高。儘管二者在server端採
相關文章
相關標籤/搜索