Scrapy(官網http://scrapy.org/)是Python開發網絡爬蟲,一個極好的開源工具。本次安裝Scrapy確實不易啊。竟然花了2天多時間,須要的支持包比較多,這些支持包相互之間的依賴關係。php
Win7專業版(X64) 注:本人從事.net平臺開發,機器上有安裝Vs2010。html
Python 2.7.5python
注意:win7 64位必須使用ez_setup.py進行安裝。方法是下載ez_setup.py後,在cmd下執行 python ez_setup.py,便可自動安裝setuptools。目前沒有直接的exe安裝版本。
Install pip from https://pip.pypa.io/en/latest/installing.htmlweb
Now open a Command prompt to check pip is installed correctly:windows
pip --version
At this point Python 2.7 and pip package manager must be working, let’s install Scrapy:網絡
pip install Scrapy
打開「<python安裝目錄>\Lib\distutils\msvc9compiler.py」scrapy
找到 toolskey = 「VS%0.f0COMNTOOLS」 % version,直接修改成 toolskey = 」VS100COMNTOOLS」 工具