給Scrapy添加代理

給請求添加代理有2種方式,第一種重寫start_request方法,第二種是添加download中間件。下面分別介紹這2種方式。 一.重寫start_request方法 比較簡單,只是在meta中加了一個proxy代理。然後可以測試了,那麼問題來了,我怎麼知道我的請求是否帶上了代理呢?可以在測試的時候去爬 「http://ip.filefab.com/index.php」 這個網站,它會顯示你當前
相關文章
相關標籤/搜索