Scrapy 爬取今日頭條街拍圖片

scrapy 爬取今日頭條圖片保存至本地 以前用 requests 爬取過今日頭條街拍的圖片，當時只是爬取每篇文章的縮略圖，今天嘗試用 scrapy 來大規模爬取街拍詳細圖片。html 分析頁面 今日頭條的內容是以 Ajax 加載而成的，咱們爬取須要的是的 json 數據而非 html。 如上圖所示，咱們對爬取的 json 數據進行解析，便可獲得文章標題，文章詳細地址。web def parse(

>>阅读原文<<