使用Scrapy抓取數據

Scrapy是Python開發的一個快速,高層次的屏幕抓取和web抓取框架，用於抓取web站點並從頁面中提取結構化的數據。Scrapy用途廣泛，可以用於數據挖掘、監測和自動化測試。 官方主頁： http://www.scrapy.org/ 中文文檔：Scrapy 0.22 文檔 GitHub項目主頁：https://github.com/scrapy/scrapy Scrapy 使用了 Twist

>>阅读原文<<