Python的兩個爬蟲框架PySpider與Scrapy安裝

Python的兩個爬蟲框架PySpider與Scrapy安裝
win10安裝pyspider:
最好以管理員身份運行CMD,否則可能會出現拒絕訪問文件夾的狀況!
pyspider:pip install pyspider
https://docs.pyspider.org/en/latest/

Win10安裝Scrapy
最好以管理員身份運行CMD,否則可能會出現拒絕訪問文件夾的狀況!
1.安裝wheel
    pip install wheel
2.安裝lxml
    https://www.lfd.uci.edu/~gohlke/pythonlibs/#lxml
    pip install 絕對路徑
3.安裝PyOpenssl
    https://pypi.python.org/pypi/pyOpenSSL#downloads
    pip install pyOpenSSL
    或者 pip install 絕對路徑
4.安裝Twisted
    http://www.lfd.uci.edu/~gohlke/pythonlibs/#twisted
    pip install twisted
    或下載而後 pip install 絕對路徑
5.安裝pythwin32
    pip install pywin32
    https://pypi.org/project/pywin32/
6.安裝Scrapy
    pip install scrapy

Scrapy命令行用法:
https://docs.scrapy.org/en/latest/
中文文檔:http://scrapy-chs.readthedocs.io/zh_CN/latest/