從控制檯能夠看到咱們的程序成功在集羣上運行:ide
Detail for stage 1:idea
Detail for Stage 0:spa
查看一下Executors的信息:開發
上述信息代表程序成功在Spark集羣上運行。get
第四步:基於IDEA構建Spark開發環境it
1,下載IDEA13.1.4社區版本「Community Edition FREE」spark
http://www.jetbrains.com/idea/download/ io
2,安裝IDEA並配置IDEA系統環境變量社區
具體安裝和配置過程請參考【Spark亞太研究院系列叢書】-第一章 構建Spark集羣(第四步)http://down.51cto.com/data/1848627 ast
3,使用IDEA開發Spark程序,咱們這裏使用SparkPi來驗證開發環境
具體開發和配置過程請參考【Spark亞太研究院系列叢書】-第一章 構建Spark集羣(第四步)http://down.51cto.com/data/1848627
4,經過IDEA在集羣上運行程序,此時須要加入
「conf.setMaster(「spark://192.168.35.129:7077」)」
運行之便可。