在本地將spark做業運行到遠程集羣

在本地IDE裏直接運行spark程序操做遠程集羣web 通常運行spark做業的方式有兩種：數據庫 本機調試，經過設置master爲local模式運行spark做業，這種方式通常用於調試，不用鏈接遠程集羣。ruby 集羣運行。通常本機調試經過後會將做業打成jar包經過spark-submit提交運行。生產環境通常使用這種方式。maven 本文介紹第3種方式：分佈式 在本地將spark做業運行到遠程

>>阅读原文<<