Python爬蟲框架Scrapy之爬取糗事百科大量段子數據

如上篇文章《Python爬蟲框架之Scrapy詳解》（傳送門：Python爬蟲框架之Scrapy詳解）所述。 首先，準備scrapy環境： 安裝Python，pip，使用pip安裝lxml和scrapy。 scrapy startproject qiubai新建一個名爲qiubai的scrapy爬蟲項目。 新建qiubai爬蟲項目 使用PyCharm打開，項目結構如圖： 定義QiubaiItem：

>>阅读原文<<