python爬蟲筆記(六)——應對反爬策略

如下總結的全是單機爬取的應對反爬策略html   一、設置爬取速度,因爲爬蟲發送請求的速度比較快,會對服務器形成必定的影響,儘量控制爬取速度,作到文明爬取python 二、重啓路由器。並非指物理上的插拔路由器,而是指模擬路由器重啓時發送的表單。登錄本身的路由器,通常路由器會提供重啓路由器的選項,根據路由器的重啓特色進行模擬,若是以爲模擬請求麻煩,那就經過selenium+chromedriver直
相關文章
相關標籤/搜索