爬取360圖片

這次我們爬取的網址是 http://image.so.com/z?ch=photography 隨着滾輪下滑，圖片一個個加載出來，所以我們推測這是Ajax形式 我們在開發工具裏選中XHR 觀察請求 可知這個url的sn參數是以30倍數增長，我們可以利用這個特性進行url的構造 其次我們圖片的具體信息都在list裏面 下面我們先新建scrapy項目 在你想創建項目的路徑裏打開powershell s

>>阅读原文<<