本文截圖及運行環境均在MAC OS X 10.9.5上實現,但基本步驟與win 7環境上相同(其實我是先在win7折騰了一把,而後爲了寫這篇教程,又在OS X 上面從新搞了一遍)python
scrapy版本爲1.0linux
參考文獻以及下載連接:數據庫
剛接觸python和機器學習的人,想必已經被python中眼花繚亂的安裝包和相關類庫搞的菊花一緊。我以前也是各類血淚史,徹底沒有老司機帶着我。折騰了差很少半個月,python環境依舊裝的破破爛爛。Windows和linux以及MACOS環境下都是演過了,各類蛋疼。直到某一天我見到了anaconda。才感受這個世界上依舊是好人多,人間仍是充滿愛的。機器學習
anaconda是一個開源的、免費的python類庫的集合,貌似一裝就安裝了200+的包,各類依賴包各類搞定。因此趕快戳頂層連接去下載吧。下面介紹的其餘工具一些是anaconda自帶的,一些是經過anaconda安裝的,總之,anaconda是一切的基石。scrapy
anaconda模塊居然木有自帶MySQL鏈接模塊,用下面的命令來安裝吧,後面抓取的內容要塞到數據庫裏面的喲~工具
conda install MySQL-python
下面就是安裝scrapy了,其實也是簡單的不要要的~,由於咱們已經安裝了anaconda,因此一切都簡單的不要要的喲~,裏面會讓你有些包更新,直接輸入y確認就行了。學習
conda install scrapy
注意:在使用conda install 安裝的過程當中,有時候由於網絡問題或者其餘問題會引發失敗,此時要仔細看提示說明,尋找緣由,若是是網絡緣由的話,從新輸入以上命令便可~。我教研室有個師弟,由於網絡緣由裝了8回,因此騷年洗洗菊花作好準備吧~code