Scrapy框架(六)——Middleware

Middleware其實是一個輕量級、較底層的鉤子框架,用來全局的去處理相對應的內容。Scrapy中主要有兩種Middleware,一種是Downloader Middleware,一種是Spider Middleware。 下載中間件 下載中間件是scrapy提供用於用於在爬蟲過程中可修改Request和Response,用於擴展scrapy的功能;Downloader Middleware處於
相關文章
相關標籤/搜索