Python爬蟲—Scrapy框架

1、爲何要使用Scrapy？ 它更容易構建和大規模的抓取項目 它內置的機制被稱爲選擇器，用於從網站（網頁）上提取數據 它異步處理請求，速度十分快 它可使用自動調節機制自動調整爬行速度 確保開發人員可訪問性 2、Scrapy的特色 Scrapy是一個開源和無償使用的網絡爬蟲框架 Scrapy生成格式導出如：JSON，CSV和XML Scrapy內置支持從源代碼，使用XPath或CSS表達式的選擇器來

>>阅读原文<<