scrapy的安裝與使用

一開始安裝的時候用不了pip install命令安裝scrapy

須要在cmd進行多幾塊命令

一開始我是這樣的

D:\python>pip install scrapy

報錯說invalid syntax

後面百度了一下：

解決辦法是：

在命令行下cd 進對應python的script文件目錄，再執行pip指令便可。

可是在打開Scripts的時候有可能也會報錯，說內部或外部沒有這個文件

這時候應該考慮的環境變量的問題，在path處添加安裝環境變量就能夠了

上面的事情昨晚就能夠安裝scrapy了

不過作完pip install scrapy安裝完後，還會繼續出現一個叫wheel的問題

這時候就要去百度搜索 python whl  

找到https://www.lfd.uci.edu/~gohlke/pythonlibs/這個連接的網址

ctrl+F 輸入twisted

點擊進去會出現

 

 選中屬於本身環境的版本就能夠下載了

我下載完就放進python的script文件目錄裏面

再用cmd重複前面的

pip install Twisted就能夠了

安裝完從新打開cmd

在Scripts處打開scrapy，由於用pip安裝的文件都會在Scripts裏面。

用scrapy bench檢查scrapy是否真正安裝完成。

若是能夠就能夠輸入命令：scrapy startproject XXX

開始scrapy的爬蟲之旅吧！