爬取360圖片

這次我們爬取的網址是 http://image.so.com/z?ch=photography 隨着滾輪下滑,圖片一個個加載出來,所以我們推測這是Ajax形式 我們在開發工具裏選中XHR 觀察請求 可知這個url的sn參數是以30倍數增長,我們可以利用這個特性進行url的構造 其次我們圖片的具體信息都在list裏面 下面我們先新建scrapy項目 在你想創建項目的路徑裏打開powershell s
相關文章
相關標籤/搜索