在intellij idea利用sbt插件遠程調試spark程序

最近在用spark,寫的spark代碼必須在集羣中才能執行,在調試時候,每修改一次代碼都要submit到spark集羣上,在調試的時候很是不方便。通過幾天的搜索,發現能夠將jar包放在集羣上,可是能夠在本地單步運行spark程序,只須要不多的設置就能夠實現。java 因爲僅用做示例,我僅僅提供簡單的scala代碼,沒有涉及到sparkcontext。可是步驟是同樣的。 一、新建scala obje
相關文章
相關標籤/搜索