scrapy框架中Spider源碼解析

scrapy框架中Spider源碼解析 一、scrapy架構 在講解spider類之前,我們先來了解下scrapy這個框架的整體架構 請看下面scrapy工作流程圖 1.scrapy引擎(Scrapy Engine) 引擎負責控制數據流在系統中所有組件中流動,並在相應動作發生時觸發事件。 2.調度器(Scheduler) 調度器從引擎接受request並將他們入隊,以便之後引擎請求他們時提供給引擎
相關文章
相關標籤/搜索