Scrapy框架流程圖解析

今日語:心空,望望遠方的高樓;心屬,依然停留 接下來就放一張scrapy的架構圖嘍~(綠線是數據流向) 簡單敘述一下每層圖的含義吧: Spiders(爬蟲):它負責處理所有Responses,從中分析提取數據,獲取Item字段需要的數據,並將需要跟進的URL提交給引擎,再次進入Scheduler(調度器) Engine(引擎):負責Spider、ItemPipeline、Downloader、Sc
相關文章
相關標籤/搜索