Scrapy爬蟲框架

Scrapy爬蟲架構流程 Scrapy,Python開發的一個快速、高層次的屏幕抓取和web抓取框架,用 於抓取web站點並從頁面中提取結構化的數據。 • Scrapy吸引人的地方在於它是一個框架,任何人都可以根據需求方便的修改。 它也提供了多種類型爬蟲的基類,如BaseSpider、sitemap爬蟲等,最新版 本又提供了web2.0爬蟲的支持。 • Scrap,是碎片的意思,這個Python的

>>阅读原文<<