Scrapy實例:爬取B站全部動漫番劇信息(Ajax接口+json數據解析)

。。。閒來無事,爬了一下我最愛的B站~~~卒 首先進入B站的番劇索引頁 ps:之前常常瀏覽這個索引頁找動漫看,因此熟練的操做~滑稽 翻頁發現url連接並無改變,用谷歌開發者工具network發現加載了XHR文件並返回json格式的響應 放到atom裏看下數據是咋樣的 要對其進行翻頁處理,觀察一下query string的規律,發現那麼多個參數只有page這個參數是變化的 因此接下來都很好作了~嘻嘻
相關文章
相關標籤/搜索