今天忽然想起來，學了那麼久的爬蟲，scrapy被忽視好久了，因此想起來去認真學習下。python
第一步安裝模塊就出現了問題，先是用的python2 進行pip安裝。scrapy
可是報錯說要什麼 MICROSOFT VISUAL C++ 9.0 IS REQUIRED 。學習
這裏找到一個解決方案:網站
進入錯誤提示給出的網址，下載安裝，從新pip install scrapy 。安裝成功url
打開http://aka.ms/vcpython27會跳轉到spa
http://www.microsoft.com/en-us/download/confirmation.aspx?id=44266.net
將安裝包下載命令行
Microsoft Visual C++ Compiler for Python 2.7blog
運行安裝ip
scrapy 如今也支持python3 了，由於我安裝了python3,因此就再次用pip install scrapy。
這裏的報錯是 MICROSOFT VISUAL C++ 14.0...(沒記錯應該是的)
可是給出的網址已經失效了。正好在另一篇博客找到了可行的解決方案：
進入一下的網站下載對應版本的twisted文件
下載以後將文件放入對應的python安裝目錄的Scripts目錄下
打開命令行，進入Scripts 目錄
輸入：
pip install +（以前下載的文件全名）
會提示Twisted安裝成功，再次嘗試 pip install scrapy
沒有再報錯，安裝成功。