Windows下pyspark的環境搭建

寫在前面的話~ 由於工作中的數據挖掘從sklearn轉換到集羣了，要開始pyspark了，但是發現市面上無論是pyspark的書籍還是文章，相對sklearn來說，還是太少了，大部分問題只能求助pyspark中的api，所以想記錄下平時學習與使用pyspark中的問題。 好了，要想使用pyspark，還是先把本地的本機環境先搭建起來~ Spark需要由JDK，Scala和Hadoop環境的支持，而

>>阅读原文<<