scrapy入門教程1:scrapy環境配置以及安裝

0. 基本環境說明

  1. 本文截圖及運行環境均在MAC OS X 10.9.5上實現,但基本步驟與win 7環境上相同(其實我是先在win7折騰了一把,而後爲了寫這篇教程,又在OS X 上面從新搞了一遍)python

  2. scrapy版本爲1.0linux

  3. 參考文獻以及下載連接:數據庫

1. 基本環境配置

1. anaconda

剛接觸python和機器學習的人,想必已經被python中眼花繚亂的安裝包和相關類庫搞的菊花一緊。我以前也是各類血淚史,徹底沒有老司機帶着我。折騰了差很少半個月,python環境依舊裝的破破爛爛。Windows和linux以及MACOS環境下都是演過了,各類蛋疼。直到某一天我見到了anaconda。才感受這個世界上依舊是好人多,人間仍是充滿愛的。機器學習

anaconda是一個開源的、免費的python類庫的集合,貌似一裝就安裝了200+的包,各類依賴包各類搞定。因此趕快戳頂層連接去下載吧。下面介紹的其餘工具一些是anaconda自帶的,一些是經過anaconda安裝的,總之,anaconda是一切的基石。scrapy

2. MySQL 模塊安裝

anaconda模塊居然木有自帶MySQL鏈接模塊,用下面的命令來安裝吧,後面抓取的內容要塞到數據庫裏面的喲~工具

conda install MySQL-python

3. scrapy 安裝

下面就是安裝scrapy了,其實也是簡單的不要要的~,由於咱們已經安裝了anaconda,因此一切都簡單的不要要的喲~,裏面會讓你有些包更新,直接輸入y確認就行了。學習

conda install scrapy

注意:在使用conda install 安裝的過程當中,有時候由於網絡問題或者其餘問題會引發失敗,此時要仔細看提示說明,尋找緣由,若是是網絡緣由的話,從新輸入以上命令便可~。我教研室有個師弟,由於網絡緣由裝了8回,因此騷年洗洗菊花作好準備吧~code

相關文章
相關標籤/搜索