【Spark亞太研究院系列叢書】Spark實戰高手之路-第一章 構建Spark集羣(第五步)(13)

從控制檯能夠看到咱們的程序成功在集羣上運行:ide

Detail for stage 1:idea

Detail for Stage 0:spa

查看一下Executors的信息:開發

上述信息代表程序成功在Spark集羣上運行。get

第四步:基於IDEA構建Spark開發環境it

1,下載IDEA13.1.4社區版本「Community Edition FREEspark

http://www.jetbrains.com/idea/download/ io

2,安裝IDEA並配置IDEA系統環境變量社區

具體安裝和配置過程請參考【Spark亞太研究院系列叢書】-第一章 構建Spark集羣(第四步)http://down.51cto.com/data/1848627 ast

3,使用IDEA開發Spark程序,咱們這裏使用SparkPi來驗證開發環境

具體開發和配置過程請參考【Spark亞太研究院系列叢書】-第一章 構建Spark集羣(第四步)http://down.51cto.com/data/1848627

4,經過IDEA在集羣上運行程序,此時須要加入

「conf.setMaster(spark://192.168.35.129:7077)」 

運行之便可。

相關文章
相關標籤/搜索