python爬蟲-Scrapy框架I

Scrapy的介紹和安裝 Scrapy是純python開發的一個高效，結構化的網頁抓取框架； Scrapy是一個爲了爬取網站數據，提高結構性數據而編寫的應用框架。其最初是爲了頁面抓取(更確切地來說，網絡抓取)所涉及的，也可以應用在獲取API所返回的數據(例如 Amazon Associates Web Services)或者通用的網絡爬蟲。Scrapy用途廣泛，可以用於數據挖掘，檢測和自動化測試。

>>阅读原文<<