針對scrapy安裝新建項目的各類疑難雜症

 以前安裝下載各類模塊,最後pip install scrapy安裝scrapy爬蟲框架。在針對爬取多個url的數據時,集成大量數據這時候須要用到scrapy爬蟲。python

這裏放上一個scrapy安裝教程連接:https://my.oschina.net/xtfjt1988/blog/364577shell

前天運行新建的scrapy項目時,scrapy shell+url。。。而後就報錯了。框架

網上查看該錯誤,說的是python版本跟pywin32不匹配。個人天吶,各類嘗試,覺得是pywin32版本錯誤,不停下載、刪除、安裝、配置,最後進入python命令查看版本,結果發現python的版本是32bit的,因而在網上下載64位的python2.7.13,下載雙擊進行安裝,覆蓋前版本。這時候在cmd輸入「python」查看版本,ok顯示爲64位了。python2.7

接下來滿心歡喜打算一切搞定進入scrapy查看命令。exm??scrapy

心神俱疲哎,因而思考了一番,決定從新安裝scrapy,那就表示那些個第三方模塊都要卸載再從新安裝!!注意,全部的第三方模塊都卸了重裝哎,這裏拿出刪除的其中一個例子。測試

將scrapy卸載後準備重裝,先重裝所須要的各個模塊,例如pyOpenSSL Windows64位的連接:http://download.csdn.net/detail/mr_computer/7790587url

再根據cmd提示的報錯信息查找解決相關問題,no matter where,只要再也不重複報一個錯誤就行了,問題很快的獲得解決,主要是模塊版本問題。.net

再例如最後一個報錯,解決須要pip install twisted==13.1.0 模塊版本必定要匹配!!!3d

ok,最後測試scrapy是否安裝成功:調試

碰見錯誤了仔細去看,你碰見的問題你們都遇到過,不停地調試調試就行了。

相關文章
相關標籤/搜索