Python爬蟲——7.Scrapy框架

一. scrapy概述 官方網站:http://scrapy.org [orginzation] 使用Python開發的主要進行數據採集的一個應用程序框架,核心使用它來進行爬蟲程序的快速開發,底層使用了twisted異步模塊,所以在進行數據採集下載時效率非常高! 1.ubuntu/macos 下,在有完善的python環境的基礎上直接安裝 scrapy 2.windows***意~安裝分兩步進行
相關文章
相關標籤/搜索