scrapy 中的CrawlSpider(三）

Scrapy框架中分兩類爬蟲，Spider類和CrawlSpider類。 創建CrawlSpider模板： scrapy genspider -t crawl spider名稱 www.xxxx.com 具體參數： callback： 從link_extractor中每獲取到鏈接時，參數所指定的值作爲回調函數，該回調函數接受一個response作爲其第一個參數。 注意：當編寫爬蟲規則時，避免使用p

>>阅读原文<<