安裝 Spyder python 開發環境 用於 Spark 數據分析 -word count

GUI裏調試Spark JOB 必須先安裝好 Spark：https://www.cnblogs.com/yjyyjy/p/12860642.html

 視頻：

https://study.163.com/course/courseLearn.htm?courseId=1210073161&share=2&shareId=480000002202885#/learn/video?lessonId=1280920774&courseId=1210073161

 

1. 安裝anaconda

• 下載安裝 anaconda

  　　下載地址：https://www.anaconda.com/distribution

  　　Spyder 是 anaconda 的一個組件，anaconda 是個功能強大的數據分析集成開發環境， 使用說明文檔：https://docs.anaconda.com/anaconda/user-guide/getting-started/

  　　

   

  2. 啓動 Spyder

• 安裝列表裏面選擇 Spyder 

  　　

   

  3. 運行Spark Job

• 打開 Spyder 開始你的第一個 Spark Job. Py 文件在這裏下載：https://github.com/yjy24/Spark_data_analysis/blob/master/Wordcount.zip

• World count 輸入文件內容：

  　　

• F5 運行 Job

  　　

   

• 輸出結果見 Console 窗口：