Scrapy的數據流程及各部分作用

     Scrapy architecture(體系結構) 組件: Scrapy Engine: 引擎負責控制數據流在系統中所有組件中流動,並在相應動作發生時觸發事件。   調度器(Scheduler) 調度器從引擎接受 request 並將他們入隊,以便之後引擎請求他們時提供給引擎。   下載器(Downloader) 下載器負責獲取頁面數據並提供給引擎,而後提供給Spider。   Spid
相關文章
相關標籤/搜索