Python爬蟲---Scrapy框架

                Scrapy Engine(引擎): 負責Spider,ItemPipeline,Downloader,Scheduler間的通訊,信號數據傳遞等。 Scheduler(調度器): 負責接受引擎發送過來的Request請求,並按照一定方式進行整理排列入隊,當引擎需要時,交還給引擎。 Downloader(下載器):負責下載Scrapy Engine(引擎)發送的所有
相關文章
相關標籤/搜索