利用scrapy爬取需要登錄的網站的數據（包含驗證碼的處理）

利用scrapy爬取需要登錄的網站的數據（包含驗證碼的處理）–以爬取豆瓣網數據爲例 1、在cmd命令行中輸入 scrapy startproject douban，創建scrapy爬蟲項目  2、在cmd命令行中調整到douban項目文件夾下輸入 scrapy genspider -t basic db douban.com（最後一個是網站域名）創建名爲db的爬蟲（如果是創建自動爬蟲要輸入-t c

>>阅读原文<<