批量下載xx藝術照片的簡單爬蟲

首先聲明下，這個爬蟲採用的框架來自慕課網的一段視頻教程http://www.imooc.com/view/563，原來的爬蟲是爬取1000個跟python相關的百度百科頁面的標題和摘要。經過改造，本文的爬蟲是爬取100個人體藝術頁面，下載每個頁面上的藝術圖片，並彙總每個頁面及頁面上所有藝術圖片的鏈接地址。 該爬蟲分爲主控程序（spider_mian）、url管理器（url_manager）、htm

>>阅读原文<<