使用scrapy爬取整站圖片

scrapy是簡單易用的爬蟲框架,python語言實現。具體去官網看看吧:http://scrapy.org/python 以前想抓一些圖片製做拼貼馬賽克(見 拼貼馬賽克算法),沒有找到順手的爬蟲軟件,就本身diy一個。使用scrapy抓取很是簡單,由於它竟然內置了圖片抓取的管道 ImagesPipeline。簡單到幾行代碼就能夠搞定一個圖片爬蟲。git scrapy的使用更ruby有點兒相似,建
相關文章
相關標籤/搜索