crawlspider類的使用

目標 掌握crawlspider爬蟲的創建方式 掌握crawlspdier中rules的書寫 能夠通過crawlspider類完成一個爬蟲 1 crawlspider是什麼 回顧之前的代碼中，我們有很大一部分時間在尋找下一頁的url地址或者是內容的url地址上面，這個過程能更簡單一些麼？ 思路： 從response中提取所有的滿足規則的url地址 自動的構造自己requests請求，發送給引擎 對

>>阅读原文<<