pyhton爬蟲學習（十三）：scrapy框架原理

Scrapy架構圖 引擎（Engine） 負責Spider、ItemPipeline、Downloader、Scheduler中間的通訊，信號、數據傳遞等。 調度器（Scheduler） 調度器從引擎接受request並將他們入隊，以便之後引擎請求他們時提供給引擎。 下載器(Downloader) 負責下載Scrapy Engine(引擎)發送的所有Requests請求，並將其獲取到的Respon

>>阅读原文<<