爬蟲神器Scrapy初探

偶然在網上看到Scrapy這個網站抓取工具，心癢癢想試一下，這一試又是一晚上，成果來之不易，還是記錄一下，萬一以後用到呢，我用Scrapy抓取了我的CSDN博客信息，以下是整個過程。 1.安裝 Scrapy pip install Scrapy 2.新建項目 打開命令行，定位到想要存儲的目錄，輸入scrapy startproject article生成的項目結構如下： scrapy.cfg：項目

>>阅读原文<<