Scrapy爬取伯樂在線的所有文章

本篇文章將從搭建虛擬環境開始，爬取伯樂在線上的所有文章的數據。 搭建虛擬環境之前需要配置環境變量，該環境變量的變量值爲虛擬環境的存放目錄 1. 配置環境變量 2.創建虛擬環境   用mkvirtualenv命令進行創建，--python後面加上python的安裝目錄，可以選擇不同版本的python.這也是用到虛擬環境的好處。最後的scrapy_env是虛擬環境的名字。創建完成之後可以看到前面小括號

>>阅读原文<<