【Spark】記一個Spark錯誤

提交Spark任務到Yarn上運行,得到如下報錯信息👇 研究了一會兒發現是自己粗心大意導致的,自己在本地IDEA跑多了,打包的時候忘記刪除setMaster了,如下👇 雖然我們在提交任務到Yarn的時候,指定了Master,奈何在代碼的優先級高於命令行指定參數,所以就算我們指定了Master也沒有效果 所以刪除了setMaster這個屬性就可以了 所以在這裏記錄一下這個錯誤,下次一定不能犯了!
相關文章
相關標籤/搜索