Scrapy基礎知識

1.定義 Scrapy是Python開發的一個快速、高層次的屏幕抓取和web抓取框架，用於抓取web站點並從頁面中提取結構化的數據。Scrapy用途廣泛，可以用於數據挖掘、監測和自動化測試。 2.執行流程圖 3.組件簡單理解 a).Scrapy Engine(引擎) Scrapy引擎負責整個框架的數據處理流程，並進行事務的出發，也就是什麼時候觸發什麼事件，由它來進行分配調用。 b).Schedul

>>阅读原文<<