Python 爬蟲-Scrapy爬蟲框架

2017-07-29 17:50:29 Scrapy是一個快速功能強大的網絡爬蟲框架。 Scrapy不是一個函數功能庫，而是一個爬蟲框架。爬蟲框架是實現爬蟲功能的一個軟件結構和功能組件集合。爬蟲框架是一個半成品，能夠幫助用戶實現專業網絡爬蟲。  一、Scrapy框架介紹 5+2結構，5個主要模塊加2箇中間件。 （1）Engine：控制所有模塊之間的數據流；根據條件觸發事件。不需要用戶修改 （2）D

>>阅读原文<<