Python學習Scrapy圖片保存三，爬取網站整個分類下所有1萬多張圖片

該分類下總共14頁，每頁45個內容，如何提取下一頁鏈接、每個小分類鏈接、小分類的標題和圖片詳情鏈接，這裏使用到了crawlspider的篩選規則 得到圖片鏈接如何按照小分類創建文件夾、存儲 這個理我們實現了自定義文件名和文件夾，但是文件夾名稱和小分類標題無關 這裏藉助ImagesPipeline中的def get_media_requests(self, item, info)實現在請求圖片鏈接下

>>阅读原文<<