Spark作業提交的方式

在Spark中,支持4種運行模式: 1)Local:開發時使用 2)Standalone: 是Spark自帶的,如果一個集羣是Standalone的話,那麼就需要在多臺機器上同時部署Spark環境 3)YARN:建議大家在生產上使用該模式,統一使用YARN進行整個集羣作業(MR、Spark)的資源調度 4)Mesos 不管使用什麼模式,Spark應用程序的代碼是一模一樣的,只需要在提交的時候通過–
相關文章
相關標籤/搜索