【scrapy學習】-----架構

scrapy架構以及組件在系統中的數據流 架構結構圖 組件 ENGINE：負責控制數據流在系統中所有組件中流動，並在相關動作發生時觸發事件。 SCHEDULER（調度器）：從引擎接受request並將它們入隊，以便之後引擎請求它們時提供給引擎。 DOWNLOADER（下載器）：負責獲取頁面數據並提供給引擎，而後提供給spider。 SPIDERS（爬蟲）：用於分析response並提供item（即

>>阅读原文<<