利用scrapy爬取須要登陸的網站的數據（包含驗證碼的處理）

利用scrapy爬取須要登陸的網站的數據（包含驗證碼的處理）–以爬取豆瓣網數據爲例 一、在cmd命令行中輸入 scrapy startproject douban，建立scrapy爬蟲項目  二、在cmd命令行中調整到douban項目文件夾下輸入 scrapy genspider -t basic db douban.com（最後一個是網站域名）建立名爲db的爬蟲（若是是建立自動爬蟲要輸入-t c

>>阅读原文<<