python使用scrapy爬取圖片

在前面的章節中都介紹了scrapy如何爬取網頁數據，今天介紹下如何爬取圖片。 下載圖片需要用到ImagesPipeline這個類，首先介紹下工作流程： 1 首先需要在一個爬蟲中，獲取到圖片的url並存儲起來。也是就是我們項目中test_spider.py中testSpider類的功能 2 項目從爬蟲返回，進入到項目通道也就是pipelines中 3 在通道中，在第一步中獲取到的圖片url將被scr

>>阅读原文<<