Python爬蟲面試題整理(小白,自己備用)

1.你寫爬蟲的時候都遇到過什麼反爬蟲措施,你是怎麼解決的? 通過headers反爬蟲:解決策略,僞造headers 基於用戶行爲反爬蟲:動態變化去爬取數據,模擬普通用戶的行爲 通過動態更改代理ip來反爬蟲 基於動態頁面的反爬蟲:跟蹤服務器發送的ajax請求,模擬ajax請求,selnium 和phtamjs 2.用的什麼框架,爲什麼選擇這個框架(我用的是scrapy框架,所以下面的問題也是針對sc
相關文章
相關標籤/搜索