延時爬取解決503錯誤

1. 503錯誤 今天爬了一個代理網站,請求狀態的狀態碼是503,且具體如下圖,可以看到第一次請求的狀態碼是200,正常;可第二次就是503錯誤碼: 然後上網搜了503錯誤碼的意義,如下: 經過分析,確定是自己爬取太快,因此設置了每隔2s進行一次爬取,更改如下:
相關文章
相關標籤/搜索