Scrapy框架有哪些組件模塊?具體的工做流程?

Scrapy Engine: 這是引擎,負責Spiders、ItemPipeline、Downloader、Scheduler中間的通信,信號、數據傳遞等等!(像不像人的身體?)web Scheduler(調度器): 它負責接受引擎發送過來的requests請求,並按照必定的方式進行整理排列,入隊、並等待Scrapy Engine(引擎)來請求時,交給引擎。數據庫 Downloader(下載器):
相關文章
相關標籤/搜索