都不知道有多少頁，還爬個錘子蟲？

摘要：Requests 和 Scrapy 中分別用 For 循環和 While 循環爬取不確定頁數的網頁。 寫在前面：本文有不少超鏈接，建議點擊底部「閱讀原文」進行跳轉查看。 我們通常遇到的網站頁數展現形式有這麼幾種： 第一種是直觀地顯示所有頁數，比如此前爬過的酷安、東方財富網， 文章見： ∞ 分析了酷安 6000 款 App，還有這麼多好東西 ∞ 50 行代碼爬取東方財富網百萬行財務報表數據  

>>阅读原文<<