Spark 三種做業提交方式

Local 本地方式:直接在 IDEA 中運行程序,無需打包發佈到集羣中,方便測試。 Standalone 方式:Spark 原生的 Master/Worker 集羣, Yarn 方式:Hadoop 的 Yarn 集羣,recourseManager/NodeManager 集羣,經過 Yarn 來進行資源的和管理調度。 本地方式是在本地 JVM 中啓動一個進程來模擬運行環境,多個線程進行做業運行
相關文章
相關標籤/搜索