關於爬蟲框架scrapy的理解和運用

其實，做爬蟲工作，大部分會選擇的框架就是scrapy，但是scrapy具體優勢如何進行工作呢，這裏簡單的說一下個的理解。 Scrapy，Python開發的一個快速,高層次的屏幕抓取和web抓取框架，用於抓取web站點並從頁面中提取結構化的數據。Scrapy用途廣泛，可以用於數據挖掘、監測和自動化測試。 Scrapy吸引人的地方在於它是一個框架，任何人都可以根據需求方便的修改。它也提供了多種類型爬蟲

>>阅读原文<<